公众号robots协议出现漏洞 谷歌、必应可搜索微信公众号内容

10月22日 , 有媒体报道称 , 谷歌和必应可以搜索到腾讯微信公众号文章 , 据此推测微信已移除robots.txt , 使其内容可在谷歌、必应等国外搜索引擎上搜索 。
【公众号robots协议出现漏洞 谷歌、必应可搜索微信公众号内容】

公众号robots协议出现漏洞 谷歌、必应可搜索微信公众号内容

文章插图
对此腾讯回应称:因近期平台技术升级 , 公众号robots协议出现漏洞 , 致使外部爬虫技术可爬取部分微信公众号内容 。目前漏洞已修复 。
一直以来 , 微信公众号内容只支持在微信内部或腾讯旗下的搜狗平台检索 , 除此之外包括百度、谷歌、必应在内的搜索引擎无法搜索到公众号文章 。
微信的这种搜索限制是依靠robots协议实现的 。robots协议又称robots.txt , 是一种爬虫协议 , 放置于网站的根目录下 , 它通常告诉网络搜索引擎的漫游器(又称网络蜘蛛) , 此网站中的哪些内容是不应被网络蜘蛛获取的 , 哪些是可以被获取的 。
在互联网反垄断热潮的推进下 , 各个互联网巨头对“互联互通”的态度和动作备受关注 。此前 , 腾讯解除了微信一对一聊天场景中对外链的屏蔽 , 于是有网友在得知谷歌、必应可搜索到微信公众号内容后 , 也将此举归结为腾讯对前述政策作出的反应 , 但腾讯回应表明这是爬虫协议漏洞 。
在流量和监管的压力之下 , 互联网公司之间的博弈将会持续进行 。


    秒懂生活扩展阅读