《盘点那些有关robots的屏蔽恩怨历史》文章已经归档，站长之家不再展示相关内容，下文是站长之家的自动化写作机器人，通过算法提取的文章重点内容。这只AI还很年轻，欢迎联系我们帮它成长：
robots的重要性在于，一个网站有权利可以存在于互联网中，但又不被指定的搜索引擎索引放到搜索结果中，因为搜索引擎在互联网上就像国王，网站就是每个人的小家，而robots协议则是对抗国王的最后利器，正所谓“风能进雨能进国王不能进”...
和搜索引擎打架的案例其实早就有了，而每次打架都会牵扯到robots协议，那么就来盘点下这些关于robots的恩恩怨怨吧...
从历史来看，任何网站与搜索引擎产生矛盾后，只要网站的robots对搜索引擎进行了屏蔽，那么任何搜索引擎从来都会停止抓取，因为这是大家默认的规则，虽然没有形成法律，但已形成契约...
......
本文由站长之家用户“承哲的博客”投稿，本平台仅提供信息索引服务。由于内容发布时间超过平台更新维护时间，为了保证文章信息的及时性，内容观点的准确性，平台将不提供完整的内容展现，本页面内容仅为平台搜索索引使用。需阅读完整内容的用户，请联系作者获取原文。
（举报）
