Hiter odgovor: Pripravite URL-je strani, ki jih želite skenirati, jih uvozite v GrabAll Premium in zaženite funkcijo Masovno skeniranje. Preglejte povezave do datotek, ki jih najdete na teh straneh, filtrirajte rezultate in prenesite izbrano. Priložen seznam nadzira, katere strani se bodo skenirale.
Uporabite seznam URL-jev strani za skupinsko skeniranje
URL strani kaže na spletno stran za skeniranje; neposredni URL datoteke kaže neposredno na datoteko. Pripravite seznam okoli strani, ki vsebujejo vire, ki jih potrebujete. GrabAll ne odkrije samodejno vsake strani na domeni, zato vključite relevantne strani izrecno.
Začnite s čisto seznamom URL-jev
Odstranite prazne vrstice, podvajanja, fragmente, parametre sledenja in očitne navigacijske URL-je. Ohranjajte en URL na vrstico in po možnosti uporabljajte celoten HTTPS naslov.
GrabAll brezplačni Očistilec seznamov URL lahko odstrani podvojene vnose in razvrsti prilepljene sezname, preden se uporabijo v večjem delovnem toku.
- En popoln URL na vrstico
- Brez podvojenih ali nepomembnih strani
- Dosledna oblika protokola in domene
Velike projekte razdelite na logične skupine
Združite URL-je po spletni strani, kategoriji, stranki, datumu ali tipu sredstva. Serija povezanih strani daje rezultate, ki jih je lažje filtrirati in poimenovati, kot en mešan seznam iz mnogih nepovezanih virov.
Začnite z majhnim vzorcem, da potrdite, da strani prikazujejo pričakovane datoteke. Serijo povečajte šele, ko vzorec da uporabne rezultate.
- Preizkusite majhen reprezentativen vzorec
- Združite podobne URL-je skupaj
- Določite praktično velikost serije
- Neuspešne ali preusmerjene strani beležite ločeno
Ravnanje s preusmeritvami, napakami in dinamičnimi stranmi
Nekateri URL-ji preusmerjajo, zahtevajo preverjanje pristnosti, vračajo napake ali naložijo pomembno vsebino šele po interakciji. Te obravnavajte kot izjeme in ne kot ponavljajoče se celotno skeniranje seznama.
Če stran zahteva ročno sejo ali vizualno potrditev, jo premaknite v delovni tok odprtih zavihkov. Uvoženo skeniranje je najbolj učinkovito pri stabilnih, neposredno dostopnih straneh.
Preglejte datoteke iz več virov
Združeni rezultati lahko vsebujejo deljene logotipe, ponovljene prenose, sličice in enak dokument, povezan z več strani. Filtrirajte po vrsti in velikosti, nato odstranite podvajanja po URL-ju in vidljivih metapodatkih.
Ohranite kopijo vhodnega seznama in izvezenih povezav pred prenosom. Tako ustvarite ponovljiv zapis, če je treba paket kasneje preveriti.
Bodite obzirni s samodejnimi serijami
Veliki pregledi ustvarjajo zahteve do spletnih mest. Ohranite razumno velikost paketov, se izogibajte nepotrebnem ponavljanju in prenehajte, če spletno mesto pokaže omejitve hitrosti ali zahteva uporabo druge metode dostopa.
Pogosto zastavljena vprašanja
Kako naj oblikujem uvoženi seznam URL-jev?
Uporabite en celoten HTTP ali HTTPS URL na vrstico, odstranite podvajanja in seznam osredotočite na strani, povezane z eno nalogo.
Zakaj najprej testirati majhen vzorec?
Vzorec potrjuje, da tip strani razkriva koristne datoteke in vam pomaga izbrati filtre pred obdelavo večjega paketa.
Kaj naj storim s stranmi, ki zahtevajo interakcijo?
Premaknite jih v odprt zavihek, kjer lahko vsebino ročno naložite in potrdite pred skeniranjem.
Ali skeniranje URL preide mimo preverjanja pristnosti?
Ne. Deluje samo s stranmi in datotekami, ki so na voljo prek dovoljenega delovnega toka brskalnika.
GrabAll skenira stran in prinese slike, dokumente, medije in druge prenosljive datoteke v en jasen seznam, tako da lahko izberete točno tisto, kar želite shraniti.