淘宝网限制了收录，百度仍然收录? 举报 理由 举报 取消 就是百度一下，淘宝网收录有介绍，robots文件存在限制指令。仍然被收了是因为用户体验么？ 2017年4月28日 2 条回复 1260 次浏览 SEO,体验,搜索引擎优化,收录,淘宝网,用户
回复 ( 2 )
没办法，用百度搜索“淘宝”官网的用户是做太多，强行抓取也是符合用户体验、需求
强行抓取了？这好像并不科学？虽然淘宝的用户行为数据确实是爆表