站内孤岛页面检测

sitemap 对账 · 入链统计 · 导航链接识别
从 sitemap 里抽这么多页面来提取内链。样本越大越准,也越慢。
出现在超过这个比例页面里的链接视为全站导航,不计入有效入链。
准备中…

📖 站内孤岛页面检测使用说明

孤岛页面指的是站内没有任何其他页面链接指向它的页面。它可能在 sitemap 里,也可能能被直接访问,但从站点结构上看它是断开的——搜索引擎顺着链接爬不到它,用户浏览时也遇不到它。

这种页面在运营了几年的站上很常见:改版时被漏掉的老文章、从导航里撤下但没删的页面、批量导入后忘记做内链的内容。它们通常表现为收录慢、排名低、几乎没有自然流量,而站长往往意识不到问题出在链接结构上。

这款工具的做法是:从 sitemap 拿到"应该存在的页面"清单,再抽样抓取一批页面提取它们的出链,两边对账,找出没有被任何抓取页面链接到的那些。

一、为什么要识别导航链接?

直接统计入链会有一个大问题:头部导航、页脚、侧边栏里的链接出现在每一个页面上。如果不处理,几乎所有页面都会显示"有几十个入链",真正有价值的正文内链反而被淹没。

所以工具加了一步:统计每个链接在多少比例的抓取页面里出现,超过阈值的判定为全站导航链接,从有效入链里剔除。默认阈值是 70%,也就是说出现在七成以上页面里的链接被视为模板的一部分。

这样算出来的"有效入链数"才有意义:它反映的是有多少篇内容在正文里主动提到并链接了这个页面。这个数字接近零的页面,即使在导航里能点到,实际上也是内容网络里的孤儿。

二、抽样意味着什么?

工具不会爬完整站——那既慢又对目标服务器不友好。它从 sitemap 里抽取一批页面(默认 40 个)来构建链接图。所以结论的准确表述是:在抽到的这批页面里,没有发现指向某某页面的链接

这意味着两件事。一是可能有漏判:某个页面确实被链接了,只是链接它的那篇文章没被抽到。二是样本越大越准,把样本数拉到 100 以上时,结果的可信度明显提高,代价是时间变长。

实用的做法是先用默认样本跑一遍,看结果里有没有明显不该是孤岛的页面。如果有,说明样本偏小,调大再跑一次。对于几百页规模的站,样本 100 通常已经能得到相当可靠的结论。

三、发现孤岛之后怎么处理?

不是所有孤岛都需要修,先分三类看。

该有内链但漏了的内容页。这是要处理的主体。找几篇主题相关的已有文章,在正文里自然地提到并链接过去。注意是正文内链,不是塞进页脚或者相关阅读模块——那些会被算作模板链接,权重传递效果差得多。

本来就该独立的页面。落地页、活动页、法务条款这类页面没有内链是正常的,跳过即可。

该删或该合并的旧内容。如果一个页面既没有内链、也没有流量、内容还过时了,那它可能根本不该继续存在。合并到相关文章并做 301,比留着一个僵尸页面更好。

处理完之后,顺手检查一下这些页面在 sitemap 里的位置和 lastmod,以及有没有被 robots 或 noindex 挡住——孤岛问题经常和这些一起出现。

四、这款工具做不到什么?

操作步骤

  1. 输入地址填sitemap地址或域名,工具会自动找根目录的sitemap.xml,支持索引型sitemap。
  2. 设样本数默认抽40个页面提取内链,几百页的站建议调到100以上更可靠。
  3. 设导航阈值出现在超过七成页面里的链接视为全站导航,不计入有效入链。
  4. 等待抓取分批并发抓取并显示进度,样本越大越慢。
  5. 看孤岛清单有效入链为零的页面排在最前,同时给出入链最少的排行。
  6. 分类处理该补内链的补正文链接,本该独立的跳过,没流量又过时的考虑合并301。

常见问题解答

什么是孤岛页面?

站内没有任何其他页面链接指向它的页面。它可能在sitemap里也能直接访问,但从结构上是断开的,搜索引擎顺着链接爬不到,用户浏览也遇不到,通常表现为收录慢、排名低、几乎没有自然流量。

为什么要剔除导航链接?

头部导航和页脚的链接出现在每个页面上,不处理的话几乎所有页面都显示有几十个入链,真正有价值的正文内链会被淹没。剔除后的有效入链数才反映有多少篇内容主动链接了这个页面。

抽样会不会漏判?

会。结论准确的表述是在抽到的这批页面里没发现指向它的链接。样本越大越准,几百页的站建议样本调到100以上。先跑默认值,如果结果里有明显不该是孤岛的页面,说明样本偏小。

发现孤岛就一定要修吗?

不一定。分三类:该有内链却漏了的内容页要补;落地页、活动页、法务条款这类本来就该独立的跳过;既没内链又没流量还过时的,考虑合并到相关文章做301。

补内链应该补在哪里?

正文里。塞进页脚或相关阅读模块会被算作模板链接,权重传递效果差得多。找几篇主题相关的文章,在正文中自然地提到并链接过去。

支持JS渲染的网站吗?

不支持。工具不执行JavaScript,前端框架渲染出来的链接抓不到。如果导航或列表是JS生成的,结果会严重失真。

为什么依赖sitemap?

sitemap提供了应该存在的页面清单,作为对账基准。但要注意真正的孤岛有时连sitemap都没进,那种情况这个工具发现不了。

大站怎么办?

抽样上限是120页。规模更大的站建议用专业爬虫软件做全站分析,这款工具适合几百页规模的站做快速体检。