Question

爬虫爬https站点怎么处理的

Answer 1

百度谷歌的爬虫都已放开对HTTPS页面的收录了，爬虫会像过去处理HTTP页面那样处理HTTPS页面。另外搜索引擎会将同一个域名的http版和https版作为一个站点来处理，优先收录https页面，在这种情况下，建议站长将http页面设置301跳转到对应的https页面。同时搜索引擎认为权值相同的站点，采用https协议的页面更加安全，排名上会优先对待。所以，为了获得更好的排名，建议站长可向第三方CA机构（如CFCA）申请SSL证书，实现HTTPS。