整站文档逐页点?这款Skill来收

批量抓取整个网站的内容。

firecrawl-crawl 是用 Firecrawl 批量收集网站页面内容的 Skill。给它起始网址和范围,它指导 AI 沿链接抓取多个页面,保存结果,适合整理同一站点的一组文档。

假如只需要网站的文档区,可以限制路径,而不是把博客、商品页和其他栏目一起收进来。文档也提供最大深度与页面数量设置,用来控制这一轮到底抓多远、抓多少。

任务可以等待完成,也可以先取得任务编号,之后再查询状态。拿到编号仅表示开始执行;还要等任务结束,并检查保存结果是否包含预期页面。

使用这项功能需要认证,抓取按页面消耗积分。大批量运行前应确认余额和范围,等待也可以设置时间上限。它适合把“这组相互链接的资料帮我收下来”变成有边界的任务;页面数量受限或链接不可达时,不能把结果直接称作完整全站。

分类:自动化集成

来源仓库:firecrawl/cli

适合用来做什么

  • 请用 Firecrawl Crawl 帮我爬取这个网站的所有博客文章。
  • 使用 Firecrawl Crawl 分析这个新闻网站的内容更新频率。

安装 firecrawl-crawl

npx skills add https://www.iskills.cc/skills/firecrawl/cli/firecrawl-crawl/SKILL.md

在本机终端执行安装命令。安装前请阅读原始说明,确认所需工具、账号和权限。

查看安装步骤 · 查看常见问题

查看 firecrawl-crawl 的用途与原始说明

浏览全部 Skill 指南