Robots
对蜘蛛程序不常用的名字，是搜索引擎的一部分来定位和索引互联网上的每个可能回答搜索请求的网页。通常只在讨论 robots HTML 标签或者 robots.txt文件的时候使用。
Robots
Robots对蜘蛛程序不常用的名字，是搜索引擎的一部分来定位和索引互联网上的每个可能回答搜索请求的网页。通常只在讨论 robots HTML 标签或者 robots.txt文件的时候使用。...
标签：
- 上一篇：相关性排名（relevance ranking）
- 下一篇：蜘蛛程序（spider）