robots.txt的写法
发布时间:2019-11-13 9:33:59 来源: 纵横数据云服务器
robots.txt的写法
(1)美国站群服务器允许所有的robot访问
User-agent: *
Disallow:
或者
User-agent: *
Allow: /
或者建一个空文件”robots.txt”即可。
(2)仅禁止某个机器人访问您的网站,如Baiduspider。
User-agent: Baiduspider
Disallow: /
更多关于robots讨论,可以qq442780253,关注纵横云Alice分享
全球服务器租用|海外服务器租用|网站建站一站式网络解决方案-纵横云
SEO专用香港空间美国服务器购买地址:http://www.zndata.com
更多欢迎联系纵横云(www.199cloud.com)在线客服艾娜:QQ 3164055976
本文来源:
https://199cloud.com/article/217.html
[复制链接]
链接已复制