蜘蛛陷阱（Spider Trap）
蜘蛛陷阱指的是由于网站内容结构的某种特征，使搜索引擎陷入无限循环，无法停止爬行。最典型的蜘蛛陷阱是某些页面上的万年历，搜索引擎可以一直单击下一个月陷入无限循环。
蜘蛛陷阱（Spider Trap）
蜘蛛陷阱（Spider Trap）蜘蛛陷阱指的是由于网站内容结构的某种特征，使搜索引擎陷入无限循环，无法停止爬行。最典型的蜘蛛陷阱是某些页面上的万年历，搜索引擎可以一直单击下一个月...
标签：
- 上一篇：蜘蛛（Spider，Bot, Crawler）
- 下一篇：中文分词