V2EX-最热主题
为什么在未设置 robots.txt 的情况下， Google 搜索不到上海人大官方网站 www.shrd.gov.cn 的任何内容但是 Bing 却能搜索到大部分公开内容
#v2ex
qqqfreeboycn: 搜索 site:www.shrd.gov.cn Google 的搜索结果为 0 ，Bing 的搜索结果包括了大部分公开内容，https://www.shrd.gov.cn 并未设置 robots.txt
source
为什么在未设置 robots.txt 的情况下， Google 搜索不到上海人大官方网站 www.shrd.gov.cn 的任何内容但是 Bing 却能搜索到大部分公开内容
#v2ex
qqqfreeboycn: 搜索 site:www.shrd.gov.cn Google 的搜索结果为 0 ，Bing 的搜索结果包括了大部分公开内容，https://www.shrd.gov.cn 并未设置 robots.txt
source
