Nopea vastaus: Valmistele sivujen URL-osoitteet, jotka haluat skannata, tuo ne GrabAll Premiumiin ja suorita Mass Scan. Tarkista näillä sivuilla löytyneet tiedostolinkit, suodata tulokset ja lataa valinta. Toimitettu luettelo hallitsee, mitkä sivut skannataan.
Käytä sivun URL-osoitteiden listaa eräskannaukseen
Sivun URL osoittaa skannattavalle verkkosivulle; suora tiedoston URL osoittaa itse tiedostoon. Valmistele listasi sivujen ympärille, jotka sisältävät tarvitsemasi resurssit. GrabAll ei löydä automaattisesti jokaista sivua domainissa, joten sisällytä asiaankuuluvat sivut erikseen.
Aloita puhtaalla URL-listalla
Poista tyhjät rivit, kaksoiskappaleet, fragmentit, seuranta-parametrit ja ilmeiset navigointiosoitteet. Säilytä yksi URL per rivi ja käytä täyttä HTTPS-osoitetta, jos mahdollista.
GrabAllin ilmainen URL List Cleaner voi poistaa kaksoiskappaleita ja lajitella liitetyt listat ennen kuin niitä käytetään laajemmassa prosessissa.
- Yksi täydellinen URL-osoite per rivi
- Ei kaksoiskappaleita tai epäolennaisia sivuja
- Johdonmukainen protokolla- ja verkkotunnusformatti
Jaa suuret projektit loogisiin eriin
Ryhmittele URL-osoitteet verkkosivuston, kategorian, asiakkaan, päivämäärän tai kohdetyypin mukaan. Ryhmä yhteen liittyvistä sivuista tuottaa tuloksia, joita on helpompi suodattaa ja nimetä kuin yksi sekava lista monista toisistaan riippumattomista lähteistä.
Aloita pienellä näytteellä varmistaaksesi, että sivut paljastavat odotetut tiedostot. Suurenna joukkoa vasta, kun näyte tuottaa hyödyllisiä tuloksia.
- Testaa pieni edustava otos
- Ryhmittele samanlaiset URL-osoitteet
- Aseta käytännöllinen eräkoko
- Tallenna epäonnistuneet tai uudelleenohjatut sivut erikseen
Käsittele uudelleenohjauksia, epäonnistumisia ja dynaamisia sivuja
Jotkin URL-osoitteet uudelleenohjaavat, vaativat todennuksen, palauttavat virheitä tai lataavat tärkeän sisällön vain vuorovaikutuksen jälkeen. Käsittele näitä poikkeuksina sen sijaan, että skannaisit koko listan toistuvasti.
Jos sivu vaatii manuaalista istuntoa tai visuaalista vahvistusta, siirrä se avoimen välilehden työnkulkuun. Tuotu skannaus toimii parhaiten vakailla, suoraan saavutettavilla sivuilla.
Tarkastele tiedostoja monista lähteistä
Yhdistetyissä tuloksissa voi olla jaettuja logoja, toistuvia latauksia, pikkukuvia ja sama asiakirja linkitettynä useilta sivuilta. Suodata tyypin ja koon mukaan, ja poista duplikaatit URL:n ja näkyvien metatietojen perusteella.
Säilytä kopio syöttölistasta ja viedyistä linkeistä ennen lataamista. Tämä luo toistettavissa olevan tallenteen, jos erä on tarkistettava myöhemmin.
Ole huomaavainen automatisoitujen joukkojen kanssa
Suuret skannaukset luovat pyyntöjä verkkosivustoille. Pidä erät kohtuullisina, vältä tarpeetonta toistoa, ja lopeta, jos sivusto näyttää nopeusrajoja tai pyytää käyttämään toista pääsytapaa.
Usein kysytyt kysymykset
Miten tuotettu URL-lista tulisi muotoilla?
Käytä yhtä täydellistä HTTP- tai HTTPS-URL-osoitetta per rivi, poista kaksoiskappaleet ja pidä lista keskittyneenä yhteen tehtävään liittyviin sivuihin.
Miksi testata ensin pieni otos?
Näyte vahvistaa, että sivutyyppi paljastaa hyödyllisiä tiedostoja ja auttaa valitsemaan suodattimet ennen isomman erän käsittelyä.
Mitä minun pitäisi tehdä sivujen kanssa, jotka vaativat vuorovaikutusta?
Siirrä ne avoimessa välilehdessä olevaan työnkulkuun, jossa voit ladata ja vahvistaa sisällön manuaalisesti ennen skannausta.
Ohittaako URL-skannaus tunnistautumisen?
Ei. Se toimii vain sivuilla ja tiedostoissa, jotka ovat saatavilla sallittujen selaintyönkulkujen kautta.
GrabAll skannaa sivun ja tuo kuvat, dokumentit, median ja muut ladattavat tiedostot yhteen selkeään listaan, jotta voit valita tarkalleen mitä tallennat.