Firecrawl 免密钥搜索
将以下提示词粘贴到你的 AI 对话框中:
请根据 https://skillhub.cn/install/skillhub.md,安装 @user_38816413/firecrawl-search-nokey。
技能介绍
解决的问题
做调研时,一次宽泛搜索往往只得到零散摘要,无法快速定位可信来源,也拿不到可继续分析的正文。Firecrawl 免密钥搜索把 网页搜索 和 单页抓取 合并成同一套 Python 命令:先按 --sources 搜网页、图片、新闻,再用 firecrawl_scrape.py 把关键 URL 转成 Markdown、HTML、链接或截图,适合给大模型、笔记工具或分析脚本提供结构化输入。
工作方式
- 搜索阶段:用
--limit控制结果数,--include/--exclude过滤域名,--categories限定github、research、pdf,--output输出text、json或markdown。 - 抓取阶段:对单个页面使用
--formats markdown等参数提取正文,--only-main可去掉导航和页脚,保留主要内容。 - 复杂调研:先做 broad scan,再围绕高质量来源做 focused search,最后对 2-3 个 URL 做 deep read。
适用边界
该技能默认走 keyless 模式,API key 解析顺序为 --api-key、FIRECRAWL_API_KEY、免密钥。它依赖 curl,内部可能回退到 urllib;Windows 下自动处理 UTF-8。遇到 HTTP 403 通常是 IP 被限,需要配置 API key;HTTP 429 表示限速,应降低 --limit 或稍后重试。免费额度大约每 10 条结果消耗约 2 credits,不适合高频批量抓取。
使用场景
- 做竞品调研时,按网页、新闻、图片分别搜索,并用域名过滤锁定官方来源。
- 写技术博客前,抓取 2-3 个权威页面,把正文转成 Markdown 以便整理引用。
- 处理论文或 PDF 主题时,用 --categories 限定 research/pdf,再做深度阅读。
- 为 Agent 准备输入时,把单页 HTML 抓取为 links 和截图,保留结构信息。
适合人员
- 需要免 API Key 获取网页资料并转 Markdown 的工程师
- 给大模型准备调研输入的算法 / 应用开发者
- 整理竞品、论文或开源项目资料的分析师
- 需要单页抓取正文、链接和截图的自动化脚本作者