第11课丨Sitemap · IndexNow · 内部链接
爬虫能读懂你的页面了,但它怎么”发现”你的每一个页面?这一课讲三条发现路径,外加一个多数人忽略的信号。
三条路径:Sitemap 把全站页面列成清单交给爬虫;IndexNow 在页面更新时主动推送通知,不用干等爬虫下次光顾;内部链接则是爬虫在你站内游走的道路,断链和孤岛页面都会让内容被漏掉。被忽略的信号是 lastmod——页面的”最后修改时间”,它是 AI 判断内容新鲜度的重要依据,乱填或不填都在损失分数。课程还会带到 Core Web Vitals 性能信号。
这一课同时是模块三的收官:结尾有一份完整的技术地基自检清单,把可抓取性、Schema、发现机制三课的检查项合在一起,跑完一遍,技术层面就齐了。