VovSoft Collect URL 网页链接抓取工具 4.1

资源介绍

VovSoft Collect URL 是 Windows 上一夸轻量型网页链接抓取工具，核心定位为 Windows 网页链接递归抓取 + 精准过滤 + 本地导出一站式工具，面向网站运维、SEO 优化、内容采集与数据整理用户，无需复杂配置，即可从指定起始 URL 递归爬取全站链接，支持单域名 / 子域名限制、文件类型过滤、URL/HTML 内容文本筛选，适配网站死链检测、全站链接导出、特定内容链接采集、批量 URL 整理等场景，兼顾抓取效率、过滤精准度与操作便捷性。

• 从起始 URL 自动抓取页面所有链接，支持深度递归（可自定义深度），遍历全站链接，适配网站死链检测、全站链接导出场景。
• 支持单域名 / 子域名限制，防止跨站抓取，聚焦目标网站，提升抓取效率与精准度。
• 支持批量添加起始 URL，同时抓取多个网站链接，适配多站点链接采集场景。
• 自定义连接超时 / 响应超时时间，适配不同网络环境，避免抓取卡顿。
• 支持自定义 User – Agent，模拟浏览器 / 搜索引擎爬虫，适配反爬机制较弱的网站。
• 支持并发数调整，平衡抓取速度与服务器负载，适配不同网站抗压能力。
• 限制抓取范围为单域名或特定子域名，防止抓取无关网站链接，聚焦目标站点。
• 支持排除指定子域名，仅抓取核心站点链接，适配多子域名网站管理场景。
• 可编辑文件扩展名排除列表，支持排除 PDF、DOC、ZIP、EXE 等非网页文件链接，仅保留网页链接（HTML/HTM/PHP 等），适配全站网页链接导出场景。
• 支持自定义排除规则，适配特殊文件类型过滤需求。
• 支持按 URL 文本关键词筛选（包含 / 排除指定关键词），快速定位特定链接（如含 “download”“article” 的 URL）。
• 支持按 HTML 内容文本筛选，抓取包含指定文本的网页链接，适配特定内容链接采集场景（如含 “教程”“下载” 的页面链接）。
• 实时显示抓取进度、链接总数、有效链接数、错误链接数，支持暂停 / 继续 / 停止抓取，适配长时间抓取场景。
• 支持链接去重，自动过滤重复 URL，确保导出链接唯一性，提升数据整理效率。
• 支持导出为 TXT/CSV 格式，适配不同数据处理场景（如 Excel 分析、批量导入其他工具）。
• 支持自定义导出路径、文件名格式，自动添加导出时间戳，便于文件管理与归档。
• 自定义 User – Agent，模拟不同浏览器 / 搜索引擎爬虫，适配不同网站访问规则。
• 支持代理服务器配置，适配需代理访问的网站抓取场景。
• 调整并发连接数，平衡抓取速度与服务器负载，适配高并发抓取需求。
• 轻量设计，运行时内存占用低，可后台运行不影响其他任务，适配长时间批量抓取场景。
• 支持禁用自动更新，避免更新干扰，适配离线使用场景。

资源截图