曾经淘宝是禁止百度抓取和收录内容页面的，如今淘宝部分开放百度蜘蛛，这也意味着百度可以遵循ROBOTS协议，对淘宝内容进行排序，那么本来日子过的不太舒坦的电商网站，未来会面临什么样的考验？对百度和淘宝来说意味着什么？
读前提示： Robots协议，是国际上搜索引擎对所有网站内容抓取的一个内容协议，通常来说，搜索引擎都必须遵守这个协议，在2016年以前，淘宝是禁止百度抓取淘宝所有内容和URL的，所以大家在百度上是无法通过搜索关键词和URL找到淘宝店铺和淘宝产品页面的，而如今淘宝却打开了这扇封闭百度多年的大门。
如图所示，几个目录都已经跟谷歌一样，对百度开放了。看不懂robots没关系，下面有解释
为了让大家进一步了解更清楚，我个人对以上目录进行了详细查询和核对，发现：
1 、/article 目录下，都是位于网站地图下的列表页面，开放给百度
2 、/oshtml 目录下，也是位于网站地图下的全球购，爱逛街等列表页面，开放给百度
3 、/product目录下，很不幸，都是403Fobidden页面（笔者怀疑程序员误操作了这次Robots的原因之一，因为没有理由对搜索引擎开放一个已经403的页面，还专门写一个Robots协议），开放给百度
4 、/Spu 目录下，很遗憾没找到相应页面，开放给百度
5、/dianpu 目录下，空欢喜一场，这不是店铺首页，而是繁体的台湾店铺列表页，开放给百度
6、/wenzhang 目录下，全是淘宝头条下的文章，内容大部分都是分享资讯类页面，开放给百度
7、/oversea 目录下，查无此目录，开放给百度
综上所述：我的看法是，淘宝这次的Robots协议，也许是个程序员的错误，随手写了一个，又或者是淘宝故意为之，测试百度搜索引擎的反应？第二个可能性我觉得是没什么必要的，我还是觉得第一个可能性更大一些。（还有个YY的结果，就是马云和李彦宏开了个玩笑，也许他们互相试探试探？）
其实，之所有有这个判断，是因为淘宝这次压根就没有把重要页面放出，而且对应的www.tmall.com的robots依然是禁止所有搜索引擎的抓取的，我们看看天猫的Robots协议：（禁止所有搜索引擎）
我再列举一下淘宝一些重要页面的URL示例：
shop150826343.taobao.com 这个是店铺的首页，通常用二级域名
item.taobao.com/item.htm?spm= 这个是产品详情页，都在二级域名item下
而这些重要页面，在百度里依然是封禁的，也就是说有价值页面依然是被封禁的不允许索引和被收录用来排名的：
所以，这才是我怀疑这次修改robots协议可能就是一次人为的失误罢了，而我的这篇文章的标题就可能沦为标题党了，所以我才加了半句解释“淘宝部分解禁百度蜘蛛”，而且这个部分解禁从上面的分析来看，等于是没有解禁，因为价值页面，也就是我说的对电商构成威胁的页面都还在封禁当中，但是这个话题既然聊开了，不如假设一下：淘宝后续如果真的开放了淘宝和Tmall的店铺首页以及产品详情页面给百度蜘蛛进行索引和排序的话，那么电商网站将会面临一场什么样的战争？
猜想1：各电商网站流量将会跌去3-5成！
所有细分的电商类关键词，如果百度绝对公平的条件下，淘宝的所有排名势必至少在短期内站在京东同一水平线上，而由于淘宝的商品类目更多，更广，所以淘宝依然很轻易的能够超越京东的商品详情页以及排名带来的流量。
更形象的解释：比如京东目前卖的有1亿类目的商品，但是淘宝可能是10亿类目的商品，这在内容和页面体系上，已然是一种质的超越，更别说单个的产品成交和评论数量等更多细节的比拼了。
所以，淘宝如果真的对百度全开放，那么京东，一号店等代表的电商类平台网站将会面对淘宝排名带来的强烈冲击，各个平台的SEO自然流量以及SEM推广流量势必会降低50%左右（如果开放了，意味着客户主是可以直接通过百度SEM投放淘宝店铺和URL的，当然更好的消息可能就是淘宝和百度的电商数据也许真的可以打通了，完全没有障碍了）
猜想2：所有品牌企业主，势必都需要在淘宝和天猫进行开店。
不然可能会面临山寨，海外以及代理淘宝店铺的流量冲击，你的品牌词和店铺，价格，产品类词将可能会被这些淘宝店所购买，当然，也许你们会说我做品牌保护了，我还是不去天猫和淘宝开店，那么我告诉你一个很严峻的事实：你的SEO结果，特别是品牌主的官网结果，将会面临淘宝店铺首页带来的巨大冲击，也许你的官网排名第一的位置可能不保！
猜想3：淘宝和百度，将会双赢，这将改变我们多年来形成的习惯：我们都知道，以前如果要上淘宝买东西，直接就上淘宝搜即可，或者是收藏店铺，但是，如果淘宝和百度真的可以开放互相的内容体系和入口，那么更多的消费者可能会选择从百度一个入口进入淘宝（值得商榷和探讨的话题，这里不展开了，但是我认为一定存在激烈的争议），淘宝将获得更多的流量和用户，而百度，也将借此打开另一扇盈利的大门，也可能是百度目前风雨飘摇中的一个涅槃重生的机会，这里面的机遇等于是把所有电商的市场投放抓到了一半！百度，你还在等什么？还不去找马云谈谈，这回已经开放了几个目录了，不如多开放几个？还是说，我们商量一下：把淘宝和天猫的robots都给开放了吧！
|
