内容加了一整块，机器那边安静得很
这次的问题出在一个站群的内容扩充上。我们往里面加了一个新板块，内容都是新写的，结构也重新排过。从人眼来看，这个站群明显厚了不少，能读的东西多了很多。
但爬虫不这么认为。新板块没有产生新的文章URL，页面里的lastmod也没动。机器再来抓的时候，看到的还是旧时间戳，旧结构信号，旧路径。它找不到任何理由重新评估这个站群。
我们记下来的数据里，内容变动的量是明确的，可抓取反馈几乎没有。想表达的新东西，没有翻译成爬虫能听懂的语言。
lastmod像个开关，没动就全都不触发
很多内容操作只关心人能不能看到，不关心机器能不能感知。人打开页面，看见新内容，就觉得更新做完了。但爬虫不是人，它不会通读全文再判断轻重。它依赖几个固定信号，lastmod是其中一个很关键的。
新板块没有新URL，说明没有新的抓取入口。lastmod不变，说明旧页面也没有重新评估的必要。两个信号都断了，爬虫就照旧路过，什么都不带走。
我们过去把lastmod只当成一条时间戳，可爬虫把它当成一个判断开关。开关没动，后面该有的动作全都不触发。这个理解上的偏差，让一次认真做的内容扩充，在机器记录里成了一片空白。
加一个日期字段，再并进lastmod
后来的处理办法不复杂。我们加了一个字段，专门用来记录结构性内容变更的日期。这个字段不替代lastmod，而是并进去，让页面层的结构变化能反映到最终修改时间上。
比方说，一篇文章改了几个字，算是内容微调。一个板块加了三组新内容但URL不变，算是结构变更。这两类动作对爬虫的意义不一样，可原先都混在一起，要么都不记，要么记得太粗。
分开之后，结构变更就有了自己的时间坐标。同步到lastmod里，爬虫看到的时间戳才和实际发生的事对得上。这个办法跑通后，新板块的更新才算补完了信号链。
反面踩过坑，lastmod太活会淹没真更新
同一条路也有走过头的时候。我们曾把非文章页的lastmod写得过于频繁，有的直接写成当天。短期看每个页面都在更新，很热闹。时间一长，问题就出来了。
lastmod满天飞，爬虫分不出哪些是实质变化，哪些只是装饰性的时间刷新。真正值得重新抓取的页面，被一堆无关时间戳稀释掉了。本来想让机器注意到更新，结果更新在噪声里消失了。
这条边界我们后来一直守着。lastmod可以并进结构变更日期，但不能当成活跃度工具来刷。哪天动了结构就写，哪天没动就让它安静待着。
新增和改动，分两套办法告知
这次经历之后，我们把更新拆成了两种告知方式。
新增内容如果产生了新URL，就把新链接放到能被抓到的入口里，让爬虫有路可走。改动了已有页面但不新增URL，就动lastmod，让旧页面有理由被重新翻一次。
两套办法对应两套信号，不能混着用。新增是给爬虫一条新的路，改动是给旧路一个新标记。路没变，只改内容，就得让时间戳开口说话。路变了，时间戳可以不动，新入口本身就是告知。
执行上也更省事。每次发布前先问一句，这次是新增还是改动。答案不同，要动的字段就不同，不用每回都全量折腾。
桐灼（淄博）网络科技有限公司做GEO优化时，常遇到类似的信号错位。内容做了很多，机器那边没收到。我们的工作是帮企业把内容变动转成爬虫和AI搜索能识别的结构信号，让更新不只是自己知道。有需要可以联系17852030756。