Agent Skills
› xcrawl-api/xcrawl-skills
xcrawl-api/xcrawl-skills
GitHub用于协调基于 XCrawl API 的站点或范围爬取任务。支持批量爬取、爬虫规则设计、异步状态轮询及输出交付,适用于数据抓取与搜索工作流。
Install All Skills
npx skills add xcrawl-api/xcrawl-skills --all -g -y
Skills in Collection (5)
用于协调基于 XCrawl API 的站点或范围爬取任务。支持批量爬取、爬虫规则设计、异步状态轮询及输出交付,适用于数据抓取与搜索工作流。
需要执行网站内容爬取
配置爬虫规则和输出格式
查询爬取任务状态
npx skills add xcrawl-api/xcrawl-skills --skill xcrawl-crawl -g -y
利用XCrawl Map API进行网站URL发现、正则过滤及爬取规划。支持通过curl或Node.js调用API,自动读取本地配置文件中的密钥,引导用户注册并激活免费额度,用于全量爬取前的站点映射分析。
需要进行网站URL发现和范围评估
请求执行XCrawl地图爬取任务
npx skills add xcrawl-api/xcrawl-skills --skill xcrawl-map -g -y
用于通过 XCrawl API 执行单页网页抓取,支持同步/异步模式、多种输出格式及 JSON 提取。需配置本地密钥并处理积分账户问题。
需要抓取单个网页内容
请求将网页数据转换为 Markdown 或结构化 JSON
npx skills add xcrawl-api/xcrawl-skills --skill xcrawl-scrape -g -y
利用XCrawl搜索API执行关键词搜索、结果分析及爬虫规划。支持配置API密钥、管理积分账户,通过cURL或Node.js调用搜索接口,获取结构化搜索结果数据。
需要执行网络搜索任务
设计搜索查询请求
分析搜索结果数据
规划后续爬取策略
npx skills add xcrawl-api/xcrawl-skills --skill xcrawl-search -g -y
XCrawl默认入口技能,用于直接发起单页抓取请求。支持同步或异步执行、格式选择及JSON提取,需配置API密钥并处理积分账户问题。
用户明确要求使用XCrawl进行网页抓取
需要提取特定URL的内容
npx skills add xcrawl-api/xcrawl-skills --skill xcrawl -g -y


