采集站 · 已落地
Crawler Skill Studio
在网页上点选字段,生成一份爬虫 skill。
采集站
- 原来的想法
- 写爬虫之前,先在页面上指出要的字段,看提取结果对不对,再把这一步收成可复用的 skill。
- 拿出来之后
- 输入网址,在预览里点元素,导出包含字段、预览和脚本的 JSON。
- 我做的取舍
- 预览用的是抓到的静态 HTML。强依赖脚本、登录或反爬的页面,不保证能点到。配置了 Gemini 密钥才会让模型写脚本,否则使用本地模板。
- 材料
- TypeScript
它解决什么问题
写爬虫之前,先在页面上指出要的字段,看提取结果对不对,再把这一步收成可复用的 skill。
访客如何使用
需要 Node.js 22 或更新版本。本地打开工作台,输入网址,在预览里点元素,确认提取结果后导出 JSON。
我做的取舍
预览用的是抓到的静态 HTML。强依赖脚本、登录或反爬的页面,不保证能点到。配置了 Gemini 密钥才会让模型写脚本,否则使用本地模板。
依据仓库 README。 · 回到城市名录