当前位置:首页 » 站长资讯 » 正文

点击去了解李勇SEO博客VIP干货群

网曝百度不顾robots协议擅自抓取微信内容

2015年12月28日 19:06:13  分类: 站长资讯  参与: 人  点这评论

搜狗合作了知乎和微信,乐视贾老板倾家荡产维护版权,大家都在努力创造独家资源,看到微信独家数据,百度这是眼红得坐不住了。

据@郭昂9爆料:百度不顾robots协议擅自抓取微信内容和应用,原文是这样的:

昨天有点事情忙到晚上,突然碰到了一个搜狗的哥们跟我抱怨平安夜还要被迫加班,想到很久没见,想一起吃个宵夜但是没有实现,说是忙不过来,今天又详细的了解了一下,原来微信公众号的数据被百度不顾robots协议大量的抓取和应用,他不得不处理反抓到凌晨,搞得平安夜都只能陪着看”百度spider“度过。虽然自己的微博荒废了很久,但还是不吐为快。

背景是这样子的,微信做了公章账号后,积累了大量高质量的作者和文章,养成了很大一批用户的阅读习惯。腾讯投资搜狗,开放微信数据供搜狗搜索独家使用,这部分数据对用户浏览和阅读需求的满足,能起到很大的帮助,也算是在搜索体验趋向于同质化的今天,能有效的带来“差异化”的体验点。所以,搜索靠腾讯的资源,将微信的公众号文章嵌入了搜狗搜索中,还开发了基于公众号的推荐应用微信头条。

当然,这种优质的独家数据是要进行独家保护的,搜狗也就用了搜索引擎常用的robots协议,对相应目录进行了限制,不允许其他搜索引擎抓取。关于robots协议,这是搜索引擎行业约定俗成的行规,可以限制其他搜索引擎抓取和索引相应内容。

robots协议 百度抓取 微信内容

搜狗搜索的爬虫协议对网站抓取内容的范围是做了明确规定的,百度爬虫没有任何权利抓取搜狗独家微信内容资源,这是事实。

其他新闻阅读:

百度推出移动网站打赏功能

百度官方分享:让蜘蛛抓取网页的四种方式

五种技巧优化出百度最喜欢的网站图片

百度网站收录提交入口

百度网址安全开发平台推出

来源:(微信/QQ:562511185),欢迎分享本文,转载请保留出处!

阅读更多:站长资讯    

投放广告点击这里去了解

  • 评论(1)
  • 赞助本站

赞助本站

◎欢迎参与讨论,请在这里发表您的看法、交流您的观点。

  • 1 百度快速排名 2015-12-29 11:32:35 回复
    那做站长的是不是 可以从微信公众账号 复制原创内容 提升排名了

站内搜索

李勇SEO的微信和QQ

加下博主李勇SEO为好友呗!
点击这里咨询具体详情

最新干货推荐

投放广告点击这里去了解

本月最热文章

投放广告点击这里去了解

最近发表

投放广告点击这里去了解

Tags列表

猜你可能喜欢

    点击去了解详情!

我要订阅 | 网站地图 | 百度地图 | 我要投稿 | 广告合作 |

Powered By Z-Blog2.2 李勇SEO博客 Copyright © 2014 合肥SEO保留所有权利 粤ICP备14092268号-1