Kitesurf 云端抓取浏览器
将以下提示词粘贴到你的 AI 对话框中:
请根据 https://skillhub.cn/install/skillhub.md,安装 @user_ed597f52/kitesurf。
技能介绍
解决的问题
在本地跑 Puppeteer 或 Chromium 做批量网页抓取,经常会遇到 CPU 和内存占用过高、机器响应慢的问题。对于 AI Agent 或大模型驱动的自动化任务来说,传统浏览器存在严重的“过度设计”:基于 Chromium 内核,自带标签页、主题、扩展和像素级渲染,不仅在传输 DOM 时会消耗大量 token,还会拖慢批量任务的速度。Kitesurf Browser 是 Cloudflare 推出的方案,为了省 token、省 CPU/内存,它抛弃了图形界面和扩展生态,把一个无状态、可扩展的轻量引擎直接部署到 Cloudflare Workers 上。
核心能力
Kitesurf 提供了三种接入方式,方便你在 Web 开发和自动化脚本中调用:
- Quick Actions (REST API):最常用的一键任务接口。只需在 Cloudflare Browser Run 的 URL 末尾加上
?browser=kitesurf即可切换引擎。支持直接抓取 HTML(content)、转成 Markdown(markdown)、截图或导出 PDF、提取链接、通过 CSS 选择器抓取指定元素,甚至调用 AI 提取结构化 JSON 以及全站爬取。 - CDP 端点:现有基于 Chrome DevTools Protocol 的自动化脚本(如 Puppeteer、Playwright)无需修改任何代码,直接把连接地址指向 Kitesurf 的 CDP 端点即可。Kitesurf 还支持通过普通 HTTP 请求(如
POST /devtools/browser)创建会话和控制生命周期,无需依赖 WebSocket。 - MCP 接入:直接配置给 MCP client(如 Claude),让 AI 拥有导航、点击、填表和截图的能力。
适用边界
Kitesurf 是为轻量级抓取和资源消耗敏感的任务设计的,并非全能替代品。在以下场景中,你需要换成默认的 Chromium 引擎:
- 复杂图形渲染:依赖 WebGL 或视频播放的站点会直接黑屏。
- 反爬严格的网站:它无法伪造真实浏览器的 TLS 指纹,遇到强风控容易被拦截。
- 持久登录态:作为无状态引擎,它不擅长保持登录的长会话。
注意:API Token 必须包含 Browser Rendering - Edit 权限,否则会遇到 403 错误。
使用场景
- 需要抓取大量文档页面并转换成结构化 Markdown 来喂给大模型,本地浏览器内存频繁爆满时,切换至云端轻量引擎。
- 已有一套基于 Puppeteer 的自动化测试脚本,不想改动代码逻辑,只希望将浏览器端点指向云端以降低 CPU 消耗。
- 需要对竞品网站进行 CSS 元素级别的数据抓取与链接提取,同时要求避开本地环境隔离运行防止 IP 被封。
适合人员
- 全栈开发者:希望用现有自动化脚本抓取网页时,不增加本地机器的 CPU 和内存开销。
- AI 应用工程师:需要频繁将网页内容转为 Markdown 输入给大模型,要求请求轻量化省 Token。
- 数据分析工程师:负责大批量网页数据采集和结构化 JSON 提取,需要低成本的云端渲染方案。