Next.js网站抓取、索引与收录修复
将以下提示词粘贴到你的 AI 对话框中:
请根据 https://skillhub.cn/install/skillhub.md,安装 @user_fccf428b/china-growth-nextjs-seo-indexing 技能。
技能介绍
解决的具体问题
Next.js 采用了客户端渲染和复杂的路由机制,这在现代前端开发中非常高效,但给搜索引擎爬虫带来了挑战。如果不加干预,爬虫可能会抓取到不完整的 HTML,导致页面虽然在服务端有响应,却迟迟无法被搜索引擎正确收录。此外,动态 META 标签、站内 sitemap 缺漏以及错误配置的 robots.txt 文件,常常造成权重分散或“收录异常”的假象。
本技能聚焦于这些具体工况:
- 规范化管理: 甄别并修复
canonical标签冲突,避免同一内容在多个 URL 下分散权重。 - 索引阻断排查: 审计
noindex标志,找出被意外屏蔽的落地页。 - 站点地图健康度: 检查
sitemap的时效性、覆盖率与逻辑错误。 - 渲染策略适配: 评估静态渲染与动态渲染(如 SSG 与 SSR)的索引表现,确保爬虫能拿到完整内容。
技能如何工作
这是一个面向增长团队的闭环工作流,它不处理通用的 SEO 琐事,而是直接对接业务漏斗。在开始前,技能会先对齐增长目标、历史数据和合规限制。如果关键业务信息缺失,它会提示信息缺口,而不是编造案例或数据。
核心执行流程:
- 目标锚定: 明确这次修复是为了提升收录覆盖率,还是解决特定转化落地页的索引问题。
- 模块拆解: 将问题拆为可独立检查的单元(如抓取层、索引层、渲染层)。
- 修复策略输出: 生成包含具体动作的优化包。例如,明确指出哪一页需要从动态渲染改为静态渲染以提升爬虫抓取率。
- 交付复核: 产出物不仅包含修复项,还必须附带负责人、时间检查点及风险提示。
适用边界与注意点
- 本技能提供的是诊断与执行方案。它不会自动修改生产环境代码,任何涉及权限变更或生产发布的操作,都需要你明确授权。
- 它不承诺流量或转化率的绝对提升。它的目标是解决“看得见但搜不到”的技术地基问题。
- 严禁在对话中输出密钥或隐私
Token,技能不会尝试读取与 SEO 无关的个人敏感信息。
使用场景
- 网站出现收录异常,技术团队需排查 canonical 冲突并修复 noindex 误屏蔽页面
- 准备大促前,运营需确认所有新增落地页均被搜索引擎正确收录且 sitemap 无漏项
- 技术 SEO 工程师需批量审计 Next.js 站点的 rendering 策略是否导致爬虫抓取不全
- 增长团队需验证已修复的 SEO 问题是否被搜索引擎重新抓取和索引
适合人员
- Next.js 站点技术负责人,需解决爬虫抓取预算浪费与索引覆盖率不足
- SEO 优化师需定位动态渲染导致的落地页收录延迟并制定修复方案
- 增长团队负责人需验证 SEO 修复后是否影响业务漏斗转化数据
- 前端工程师需配合调整静态渲染策略以提升搜索引擎抓取效率