添加到 Chrome
添加到 Edge
简要说明：导入前先规范化 URL 列表并保留副本，按相关主题分批扫描页面，单独检查失败项，筛选合并结果，并将来源列表与项目一起保存。
从整洁的 URL 列表开始
删除空白行,复制,碎片,跟踪参数,以及明显的导航URL. 每行保留一个URL,并尽可能使用完整的HTTPS地址.
GrabAll 的免费 URL List Cleader 可以在更大的工作流程使用之前对被粘贴的列表进行分解和排序.
- 每行一个完整的 URL
- 没有重复或无关的页面
- 一致的协议和域名格式
- 只授权您访问和扫描页面
将大型项目拆分为多个批次
按网站,类别,客户端,日期,或资产类型分组URL. 一批相关页面产生的结果比许多无关来源的混合列表更容易过滤并命名.
从一个小样本开始,确认页面暴露了预期的文件. 仅在样品产生有用结果后才对批量进行分级.
- 测试一个小的代表性样本
- 将类似的 URL 组合在一起
- 设置实际的批量大小
- 记录失败或重定向页面
处理重定向、失败和动态页面
一些URL重定向,需要认证,返回错误,或仅在交互后才加载重要内容. 把这些当作例外处理,而不是反复扫描整个清单。
如果一个页面需要手动会话或可视确认,请将其移动到开放-tab工作流程. 被导入的扫描最强 有稳定的,可直接访问的页面。
检查来自多个来源的文件
综合结果可以包含共享的标志,重复的下载,缩略图,以及从多页链接到的同一份文档. 按类型和大小过滤,再由URL和可见元数据来分解.
在下载前保存输入列表和导出链接的副本. 如果批次必须稍后检查,这就会产生可重复的记录。
合理控制自动批处理
大型扫描创建对网站的请求. 保持批量合理,避免不必要的重复,如果站点显示费率限制或要求您使用另一种访问方法,则停止.
遵守网站条款、适用的机器人指导、许可证和组织政策。 更快的工作流程仍然需要负责任地使用。
常见问题
导入的 URL 列表应该采用什么格式？
每行填写一个完整的 HTTP 或 HTTPS 地址，删除重复项，并让列表只包含同一任务相关的页面。
为什么要先测试少量页面？
少量测试可以确认页面是否公开了所需文件，并帮助你在处理大批次前选择合适的筛选条件。
需要交互才能加载的页面该怎么办？
将这类页面改用标签页扫描，先在当前会话中手动加载并确认内容，再开始扫描。
URL 扫描会绕过登录验证吗？
不会。导入 URL 扫描不会绕过登录、账号权限或其他访问控制。
允许您访问和下载的文件使用 GrabAll。 扩展帮助发现和组织页面公开的网页资产;它不会绕过认证,付费墙,DRM,私人内容,版权,或网站规则.