AGI Hunt· Extreme_Leg_6162·· 3 小时前AI 评分63
Scrape_01 开源:一句话生成网页提取器,支持礼貌与猛爬模式
开源自修复爬虫 Scrape_01:一句话生成提取器,礼貌与猛爬双模式
AI 导读
开源项目 Scrape01 可根据 URL 和一句自然语言目标,由 Agent 设计提取器并在真实页面上验证,随后爬取并输出有序 CSV。它提供默认遵守 robots.txt 的礼貌模式和渲染页面、约 150ms 请求间隔但忽略 robots.txt 的猛爬模式,并附带 CLI、本地 Web 面板、Telegram 入口及自动修复功能。
来源:AGI Hunt · agihunt.info