ZDAT 数据采集
将以下提示词粘贴到你的 AI 对话框中:
请根据 https://skillhub.cn/install/skillhub.md,安装 @user_15292d5a/yjkj-zdat-crawl-skill。
技能介绍
要解决什么问题
在数据分析类 Agent 工作流里,模型往往只能「口头描述」怎么抓数,却缺少与 ZDAT 场景对齐的爬取约定:目标站点怎么拆、字段怎么落盘、失败时如何重试,都容易每次从零对齐。zdat-crawl-skill 把这类任务收敛成可复用的技能上下文,让对话里直接按同一套 crawl 语义推进,而不是临时拼凑脚本思路。
技能如何工作
该技能在 SkillHub 上以规范名 @user_15292d5a/yjkj-zdat-crawl-skill 发布,归类为 data-analysis。其核心定位是:在 Agent 侧挂载与 ZDAT 数据采集相关的操作指引与流程约束(具体步骤以安装后的 SKILL.md 为准)。典型使用方式包括:
- 明确采集对象(URL、列表页、分页规则)与输出字段
- 在对话中让模型按技能约定组织请求、解析与结构化结果
- 将爬取结果对接后续清洗、统计或入库环节
技能本身不替代你本地的网络环境与合规策略;它主要减少「每次任务重新讲一遍爬取规范」的沟通成本。
适用边界与注意点
- 合规:遵守目标站点的
robots.txt、服务条款与当地法律,勿用于未授权的大规模抓取。 - 稳定性:页面结构变更会导致选择器失效,需要结合人工校验或回归检查。
- 能力边界:资料中未展开的具体 API、鉴权方式与存储格式,请以技能仓库内文档与运行时环境为准,避免在介绍中臆造实现细节。
使用场景
- 公开网页有多页列表,需要按分页规则抓取标题、链接等字段,再交给统计或入库脚本处理。
- 在 Agent 对话里一次性说明目标 URL、字段 schema 与重试策略,让模型按技能约定的 crawl 语义组织采集步骤。
- 接到临时站点采集需求,希望复用同一套 ZDAT 爬取上下文,而不是每次从零写爬取说明。
- 采集结果要先对齐内部 ZDAT 数据流水线,需要在对话中明确解析规则与结构化输出格式。
适合人员
- 每周要从固定栏目页更新指标、再汇总进表格或数据库的数据分析师
- 用 Agent 处理零散网页采集、需要统一分页与字段约定的数据工程师
- 维护 ZDAT 相关数据集、负责按站点结构变更调整采集说明的研究或运营人员
- 在 SkillHub 编排 data-analysis 类 Agent,要把网页采集步骤写进可复用技能流程的集成维护者