如题
离线
任何行业都有规矩。搜索引擎行业的规矩就是尊重被搜索网站不被检索的意愿。一般在网页的头部或者网站的根目录可能有个文件告诉搜索引擎关键字是什么,介绍是什么,或者干脆不要检索我。如果腾讯的服务器告诉搜索引擎他不愿意自己托管的内容被检索,搜索引擎就会跳过这些页面。
离线
反正我用谷歌偶尔能搜索到公众号的东西,百度就没用过不清楚。。公众号本身在互联网里才占多少流量,搜不到正常的吧。
离线
【【柴知道】搜索引擎怎么搜不到信息了?因为互联网正在孤岛化-哔哩哔哩】 https://b23.tv/MgHOOO
微信公众号禁止爬虫
离线
尊重ROBOT文件
离线
https://mp.weixin.qq.com/s/ByXbn3gM7vai-mPdywn3Dg
https://mp.weixin.qq.com/robots.txt
User-Agent: *
Allow: /$
Allow: /debug/
Allow: /qa/
Allow: /wiki
Allow: /cgi-bin/loginpage
Allow: /cgi-bin/wx
Disallow: /
这就是微信公众号没有被搜索引擎收录的原因, 禁止任何爬虫.
离线
离线
因为搜狗是腾讯的
离线
哇酷小二 说:因为搜狗是腾讯的
怪不得叫 狗日的的TX 🐶
离线