新总统，新robots.txt

消息来源： http://www.kottke.org/09/01/the-countrys-new-robotstxt-file

 

美国新总统奥巴马所倡导的变革思想似乎在他上任的第一天就在白宫网站 上体现出来了。和之前布什两千四百行的robots.txt 对比起来，“奥巴马版”的robots.txt 则只有短短的两行

User-agent: *
Disallow: /includes/

评论

3 楼 liuming 2009-01-31  

说明一下：发表这篇文章的时候是两行的

2 楼 鸡汤捞饭 2009-01-30  

User-agent: *
Disallow: /includes/
Disallow: /search/
Disallow: /omb/search/

四行....
/robots.txt

1 楼 java.lang.Object 2009-01-24  

User-agent: *
Disallow: /includes/
Disallow: /search/
Disallow: /omb/search/

四行吧