301重定向那条链,三个地方各写了一份规则
量法是每个站从四种入口各走一次不跟随重定向的链,逐跳记状态码和能认出厂商的响应头,再取两台主机各自的HSTS,最后拿域名去问浏览器预置清单的状态接口。中途尺子坏了四次:并发太高把限流读成没数据,用响应头认建站平台全样本命中零,还把抓取失败当成了没有指纹。
标签
保哥笔记 站点体检 标签下共 3 篇文章合集,含《301重定向那条链,三个地方各写了一份规则》《Cookie有效期谁说了算?569条到期日实测》《隐私政策的最后更新日期,347个页面里三分之二没写》等,与 技术SEO、HTTP响应头、内容SEO 主题密切相关,覆盖 SEO/GEO 实战角度的深度解析与可落地方案。
量法是每个站从四种入口各走一次不跟随重定向的链,逐跳记状态码和能认出厂商的响应头,再取两台主机各自的HSTS,最后拿域名去问浏览器预置清单的状态接口。中途尺子坏了四次:并发太高把限流读成没数据,用响应头认建站平台全样本命中零,还把抓取失败当成了没有指纹。
做法是把响应头里所有指向未来的字段拆开逐条换算:Set-Cookie的两个到期字段、Expires响应头,以及.well-known下那份规范要求必须写到期日的文本。换算的零点得取每次响应自己的Date头,第一版拿了个固定时刻,凭空多出十天,55条被误判成自相矛盾。
取样先顺页脚锚文本找五类政策页,找不到再按常见路径逐个试,取回正文后剔掉JS空壳与被限流挡回的页面,剩下100个站、347页。识别器前后修了六次:漏掉Last Reviewed与EFFECTIVE两种写法,把促销条款与FAQ当成了服务条款,还差点被平台限流骗成没有数据。