2008年9月9日

blogspot 的 robots.txt: 毕竟是 google 的

有 blogspot 的,有兴趣可以看看域名下面的robots.txt。
我看见的是这个情况:
---------------- BEGIN robots.txt -------------
User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Noindex: /feedReaderJson
Disallow: /
---------------- END robots.txt ---------------
恩…… Mediapartners-Google.......

没有评论: