计算机视觉专家
将以下提示词粘贴到你的 AI 对话框中:
请根据 https://skillhub.cn/install/skillhub.md,安装 @org-02qudk26/computer-vision-expert-zh。
技能介绍
你在解决什么问题
实时检测、文本引导分割和 3D/深度感知往往各有一套模型与后处理:NMS 拖慢边缘推理、点选式 SAM 难以规模化、标定与深度学习管线割裂。本技能把 2026 世代 的检测、分割、VLM 与几何能力串成可落地的设计对话,而不是泛泛讲 OpenCV。
技能如何帮你推进
- 统一实时检测(YOLO26):端到端 无 NMS 推理,配合去除 DFL、MuSGD 与 ProgLoss/STAL,面向 IoT/工业小目标与 ONNX/TensorRT/NPU 导出。
- 可提示分割(SAM 3):Text-to-Mask 用自然语言定位对象;SAM 3D 做单/多视图重建;检测、分割、跟踪可共用一套逻辑。
- VLM 与几何:Florence-2、PaliGemma 2、Qwen2-VL 做视觉定位与 VQA;Depth Anything V2、亚像素 Charuco 标定与视觉 SLAM 补空间层。
典型组合:YOLO26 做候选框,SAM 3 做掩码细化;或 text-to-mask 隔离部件,避免为每种变体单独训检测器。
边界与注意点
- SAM 3 显存偏高时考虑量化/蒸馏;文本提示要具体(如「5mm 螺栓」),减少歧义。
- 运动模糊优先调曝光/快门,或依赖 SAM 3 时间一致性。
- 反模式:手搓 NMS 后处理、只做点选分割、沿用带 DFL 的旧导出管线。
使用场景
- 产线相机要在 NPU 上跑实时小目标检测,需评估 YOLO26 无 NMS 导出与 ProgLoss/STAL 配置
- 质检要用自然语言圈出「右侧蓝色容器」等部件,不想为每种 SKU 单独训练检测头
- 多目立体 rig 上线前,要搭亚像素 Charuco 标定管线并核对与现代推理栈的坐标约定
- 自主移动平台要把单目深度、单应性与轻量检测组合成可用的 2.5D 场景表示
适合人员
- 要把 YOLO 检测从带 NMS 的后处理迁到 ONNX/TensorRT 的嵌入式视觉工程师
- 负责仓储/产线视觉方案、需在文本引导分割与实时检测之间做架构取舍的算法负责人
- 做机器人感知栈、需串联深度估计、标定或视觉 SLAM 与部署约束的机器人软件工程师
- 在 Florence-2、Qwen2-VL 等 VLM 上做视觉定位或结构化 VQA 落地的研究型工程同学