Robots协议

  • Robots协议是什么?设置Robots.txt有什么作用?

    当我们开始做网站的时候,很多seo优化细节要注意,就像今天聊的Robots协议,看似就一个txt文档,其实对于网站优化和收录有很大影响。   因为我们搭建一个全新网站的时候,网站根目录是没有Robots协议文档的,需要站长自行去添加,很多站长不知道或不太关心Robots协议的撰写,有的甚至设置错误Robots协议导致蜘蛛屏蔽了蜘蛛。   …

    2020-10-15
    948