您的位置:首页 > 站长资讯

robots文档如何设置该屏蔽哪些文件?这些根目录下的文件都是实现什么功能?

2020-07-27 20:37:50 dxy7810.cn

你问的这么多,不如自己去百度站长平台看Robots 使用文档说明了

不想让蜘蛛抓取的都可以屏蔽,比如后台登陆地址,低质量或者无内容的页面,网站做了伪静态后动态的页面等等。



南京看白癜风哪家医院好 http://wap.nbfzz.com

关于星光资讯网 | 广告服务 | 联系我们 | 网站声明 | 本网招聘 | 本网动态

版权所有:星光资讯网 Copyright @2012-2021 Inc.All Rights Reserved.