问答
2015-10-17
来自:开发者社区
CDN怎么加robots.txt,会不会重复收录?
用了CDN后,cdn镜像完全复制了一个站 。cdn.baidu.com显示的和原站www.baidu.com一样, 如果不在cdn.baidu.com上加入robots.txt,那不是搜索引擎把 这个域名也收录了?,七牛和又拍,cdn都是可以另外加入robots.txt屏蔽掉cdn.baidu.com下所有内容。 而且有些网...
本页面内关键词为智能算法引擎基于机器学习所生成,如有任何问题,可在页面下方点击"联系我们"与我们沟通。