为何在未设置robots.txt的情况下谷歌搜不到上海人大官网任何内容但Bing正常搜到？

📌 为何在未设置robots.txt的情况下谷歌搜不到上海人大官网任何内容但Bing正常搜到？共 5 樓

主帖chen0717

🕐 2025-5-17 19:11:20

搜索 site:www.shrd.gov.cn ，

Google的搜索结果为0

Bing的搜索结果包括了大部分公开内容，https://www.shrd.gov.cn 并未设置robots.txt

#? 樓maro666

🕐 2025-5-17 19:52:04

服务器屏蔽了谷歌蜘蛛抓取就行了呗

#? 樓chen0717

🕐 2025-5-17 19:55:19

maro666 发表于 2025-5-17 19:52

服务器屏蔽了谷歌蜘蛛抓取就行了呗

#? 樓swds

🕐 2025-5-17 21:32:21

很多政府网站屏蔽境外IP。科学上网时试试看就知道了

#? 樓chen0717

🕐 2025-5-17 22:14:06

swds 发表于 2025-5-17 21:32

很多政府网站屏蔽境外IP。科学上网时试试看就知道了