结构化数据机器学习实战指南
将以下提示词粘贴到你的 AI 对话框中:
请根据 https://skillhub.cn/install/skillhub.md,安装 @kunlungrowth/structured-data-ml-practice-guide。
技能介绍
解决哪些表格数据建模痛点
拿到一批业务数据想做预测,却不知道特征该怎么加工?或者模型离线 AUC 高达 0.9,一上线就断崖式下跌?在结构化数据上,盲目堆叠深度学习往往得不偿失。这个技能充当你的“表格数据建模教练”,帮你避开最常见的坑:用未来数据预测过去、统计量全量计算导致的数据泄漏,以及缺乏基线导致的盲目自信。
核心工作流与实操套路
技能遵循严谨的工程顺序,确保每一步都可验证:
- 开工顺序:先精确定义目标变量与预测时点,按时间切分数据以防作弊;接着跑通逻辑回归基线,再逐步迭代特征与模型。
- 特征工程:针对数值、类别、时间和聚合数据提供标准处理套路。核心原则是统计量只能来自训练集,目标编码必须在交叉验证内完成,聚合窗口必须截止在预测时点前。
- 模型选择:默认路径为逻辑回归(基线)→ 梯度提升树(主力)→ 集成融合。明确指出表格数据不需要深度学习,调参不如加好特征。
- 泄漏排查与落地:提供数据泄漏 Checklist,要求用“模拟真实预测时点”的数据回测。上线后关注特征与预测分布漂移,并配备规则策略作为退化预案。
适用边界与合规提示
本技能专注于不随库版本变化的方法论,不涉及具体框架的 API 调用细节。在涉信贷、招聘等高风险决策场景,模型输出仅作辅助参考,最终决策必须遵循行业监管要求与公平性审查,切勿让业务“裸奔”。
使用场景
- 拿到用户行为表格数据做流失预测,需要明确开工顺序和特征工程套路
- 模型离线分数高但上线表现差,需要排查特征中的时间泄漏或全量统计泄漏
- 准备建模但不清楚该先跑什么基线,需要对比逻辑回归和梯度提升树的效果
- 上线前想用模拟真实时点的数据回测,验证是否存在数据泄漏问题
适合人员
- 数据分析师,需要用结构化数据做预测建模,想掌握特征工程和泄漏排查的方法
- 机器学习工程师,负责业务模型上线,想找梯度提升树的落地步骤和监控策略
- 业务建模人员,面对表格数据不知道如何选择模型,想明确基线到主力模型的流程
- 数据科学从业者,处理高风险决策场景的模型,想确认合规提示和泄漏排查清单