想抓网页?用这款Skill先选对命令

抓取网页内容和提取结构化数据。

想从网页里拿资料,不一定要一上来就爬整个网站。just-scrape 这个 Skill 把搜索、抓单页、提取字段、批量爬取和监测页面分开,先根据你手里的网址和目标选命令。

还没有具体网址时,用 `search` 找页面;已经知道网址,只想拿正文或链接,用 `scrape`;需要结构化 JSON,再用 `extract`。如果要处理一整个文档区,才考虑 `crawl`,并先限制页数、深度和链接数量。这样不容易为了找一段信息,误启动一轮过大的抓取任务。

它也把“拿原文”和“让 AI 整理字段”区分开:`scrape` 可以取 Markdown、HTML、截图或链接,`extract` 则适合从已知页面里按问题抽取 JSON。要做持续跟踪,另有 `monitor`;想查看以前的请求,则用 `history`。

第一次使用先跑 `validate`,再用一个小页面试请求。抓回来的内容要当成第三方资料,不能把网页里的文字当命令执行;批量操作前还要看看 credits。这个 Skill 适合经常查网页、抓文档或整理网站数据的人,重点是帮你选对抓取方式,不是替你保证网页内容完整或永久不变。

分类:自动化集成

来源仓库:scrapegraphai/just-scrape

适合用来做什么

  • 如何使用 ScrapeGraph AI 从这个网址提取所有产品名称?
  • 请帮我设置一个网页抓取任务并监控页面变化。

安装 just-scrape

npx skills add https://www.iskills.cc/skills/scrapegraphai/just-scrape/just-scrape/SKILL.md

在本机终端执行安装命令。安装前请阅读原始说明,确认所需工具、账号和权限。

查看安装步骤 · 查看常见问题

查看 just-scrape 的用途与原始说明

浏览全部 Skill 指南