发新话题
打印

央视“今日关注”谷歌专题暗藏巨大危机

这个不用担心吧,至少百度是从来不遵守robots.txt这个协议的,到时候google对于大陆网站也不遵守就可以了。
尽管操作难度不大,但核查成本应该很高,因为每个站点的robots.txt可能都不一样,千千万万个站点难道一一去核对?这和备案不同,备案是有和没有的区别,robots.txt可以有可以没有,还可以是不同的。

TOP

发新话题