SEO诊断:网站是否包含 Robots文件

  • A+

Robots的全称是“网络爬虫排除标准”( Robots Exclusion Protocol)网站通过 Robots协议告诉搜索引擎哪些页面可以抓取,哪些页面不能抓取在网站中,尤其是在新网站中设置 Robots文件,有助于搜索引擎收录网站页面。


搜索引擎营销SEO诊断:网站是否包含 Robots文件


Robots文件的具体设置方法如下:

(1)先检查网站是否设置了 Robots文件。检查方法是直接访问网站域名robots.txt,比如tuil8.com/robots.txt,若能正常访问,则说明该网站设置了 Robots文件:反之,则没设置。

2)如果没设置,则需要在本地新建txt格式文件,文件名为 robots txt

(3)Robots文件生成器生成代码,网址:http://bolchinaZ.com/robots

(4)将代码复制到txt文件中。

(5)robots txt上传到FTP根目录。

(6)再次检查网站域名/ robots. txt.,是否可以正常访问。注意, robots:txt的命名,都应该是小写

(7)如果网站有地图,则可将地图地址空一行放在 Robots文件中


weinxin
微信公众号:pvseo7
关注我了解更多内容

发表评论

目前评论:0