入口页做好之后，接下来要决定的就是链接放在哪。位置不决定收录结果，但它会影响蜘蛛在一个页面里先看到什么、看到多少，以及这个页面在结构上像不像正常网页。同一条目标 URL 放在正文段落里和堆在页脚，被抓取到的概率通常不一样，差别主要来自解析顺序和页面结构信号。
蜘蛛是怎么读一个入口页的
抓取器解析 HTML 基本是自上而下、按 DOM 顺序推进的。首屏、正文前部的链接会先进入待抓队列，页脚、边栏这类后出现或被模板重复输出的链接排在后面。如果一次投喂的 URL 数量超过页面的承载，排在后面的那批就可能长期轮不到。所以位置安排的第一个作用，是给待抓链接排队。
三种位置的适用场景
正文内链：最接近自然内容
把链接写进段落或列表项里，前后有文字承接，是结构上最不突兀的位置。适合数量不大、希望长期保留的目标页。缺点是数量受内容长度限制，硬塞会显得别扭。
侧栏与聚合区块：批量投喂的主力
侧栏、相关推荐、列表区块可以承载较多链接，也方便按批次替换。注意同一区块内的链接数量和更新频率，长期不变、动辄几百条的区块，很容易被识别成模板输出。
页脚：谨慎使用
页脚链接数量多、位置靠后、跨页重复，是最容易被判定为链接堆的位置。真要用，建议控制在十几条以内，并且与站点主体内容有关联，不要把所有目标都往页脚倒。
一个页面上放多少条合适
没有固定数值，可以参考两点：一是页面本身的正文长度，二是服务器与抓取节奏。经验做法是先进后出——首屏和正文放一批重点 URL，剩余部分放在列表区块里，整页外链数量控制在正文能撑住的范围内。
- 重点目标：放在正文或首屏列表，数量少而稳定
- 一般目标：放在中部的列表区块，按批次轮换
- 长尾目标：可以放页脚，但数量要压住，并且定期清理失效地址
- 同一目标在一页内出现一到两次足够，重复多次没有额外好处
排布时容易踩的坑
常见误区是把链接位置当成决定因素：位置只影响被抓取到的先后，收录与否还要看目标页本身的内容和质量。
- 所有链接堆在页脚，正文几乎没有可读内容
- 链接文字全部是同一个词，或用无意义的符号填充
- 每次更新只替换链接，页面正文从不变化
- 入口页用 JS 渲染链接，蜘蛛拿到的 HTML 里空空如也
怎么验证位置安排是否起作用
看日志比看感觉可靠。给不同位置的链接加不同的路径前缀或参数，然后统计日志里各前缀的出现次数和时间分布。如果正文里的链接访问密度明显高于页脚，说明排布起了作用；如果两类都一样或者都为零，问题多半不在位置，而在入口页是否被抓、是否有可解析的链接。
最后回到操作层面：先保证入口页能被正常抓取、HTML 里能直接读到链接，再考虑把链接往哪个位置放。位置是优化项，不是救命项。