全流程数据分析
将以下提示词粘贴到你的 AI 对话框中:
请根据 https://skillhub.cn/install/skillhub.md,安装 @user_053d27d0/user-053d27d0-data。
技能介绍
这类问题为什么烦
真实项目里的数据很少是「查一条 SQL 就完事」。常见情况是:源在数据库、REST API 和 CSV/Excel 里各占一块;字段类型不一致、空值和重复混在一起;业务方要的是「和上季度比怎么样」,研发则要可加载、可校验的管道。若每一步都临时写脚本,变换逻辑不落文档、分析不可复现,后面很难回答「这个数字怎么来的」。
技能如何组织整条链路
本技能把数据工作拆成可对照的模块:查询与抽取(SQL、API、多源合并)、清洗与变换(空值、去重、规范化、关联)、分析与统计(EDA、假设检验、归纳发现)、可视化与汇报(图表类型匹配、导出 PNG/SVG/HTML)、质量与校验(范围检查、异常与漂移)。
典型交互方式包括:
- 查询生成:用自然语言描述需求 → 生成带
JOIN/过滤/聚合的查询,并说明执行思路或返回结果。 - 清洗:加载脏数据 → 识别空值、重复、离群与格式问题 → 在预览样本变更后再应用修复并记录每一步。
- 探索分析:输出分布、相关性与描述统计,标出异常与值得跟进的模式。
- 例行报表:一次定义指标与图表 → 按周期重跑并附要点摘要。
技能还按角色区分侧重点(分析师、工程、业务、研究、开发),见 patterns.md 中的工作流;并硬性要求:分析前校验类型与取值范围、缺失值策略需写明、统计检验先核对假设、输出带种子/版本/时间戳。
适用边界
它擅长对话驱动的分析与管道草稿,不是替代你已上线的调度系统或数仓治理平台。涉及生产写库、权限与合规时,仍需你在环境里确认连接与变更审批;对超大表或复杂 OLAP,应结合现有引擎与分区策略,而不是默认一次拉全量。
使用场景
- 业务库多张表关联,需要用自然语言描述指标后生成带 JOIN 与聚合的 SQL 并核对执行思路
- 接手一份含空值、重复行和格式混乱的 CSV,要在全量变更前先预览修复样本并记录变换步骤
- 新数据集入库前要做分布、相关与异常点梳理,并整理成可给业务方看的要点摘要
- 已定义季度 KPI 图表,希望按周期自动重跑指标、更新图并输出本期亮点说明
适合人员
- 对接业务库写 ad hoc 查询的数据分析师,常要把口头需求落成可解释的 SQL 与初步结论
- 负责把 API/文件数据清洗后写入下游表的数据工程师,强调类型校验与变换文档
- 要看同比环比与仪表盘、但不想自己写 SQL 的产品或运营,需要白话解读配合图表
- 做实验或调研、需要假设检验与可复现输出(种子、版本、时间戳)的研究或分析同学