百度Spider升级HTTPS抓取公告

涂社发布 4年前 (2017) 涂社小编
532 0 0

8月份百度Spider升级了对HTTPS数据的抓取力度,HTTPS数据将更快被Spider抓取到。如网站还在做HTTPS的刷新,且网站数据未搭建好,建议网站接纳以下措施,制止Spider抓取,以免造成网站流量损失

1、把HTTPS的协议封掉,可把443端口关掉;

2、做HTTPS到http的301;

百度与W3C中国联合组织移动网页加速技术研讨会

百度搜索面向合作伙伴的官方平台,为开发者、内容创作者、站点管理者等伙伴,提供优化工具、数据、课程、Q&A等服务,助力资源进入搜索,同时提供搜索项目合作机会,让优质资源脱颖而出。

3、建议站点在改HTTPS没刷新好之前,不要提供超链接指向,以免被Spider抓到HTTPS。

4、针对一个服务器下有多个域名的情形,建议未做HTTPS的网站,设置HTTPS抓取返回失败码,或将HTTPS站点301/302到HTTP,制止抓取泛起问题。

版权声明:涂社小编 发表于 2017年8月30日 上午8:00。
转载请注明:百度Spider升级HTTPS抓取公告 | 涂社互联资源导航平台

相关文章