Question

亚马逊是如何反爬虫的

Answer 1

选择一款合适的辅助软件也很重要！下面是一米软件价格与数据监控系统，你可以了解一下

1，多模式数据采集监控

（1）可根据关键词/类型/排序等监控各项排名和产品价格等数据;

（2）可自定义根据Ebay item Number号码批量导入监控出价等数据;

（3）可自定义根据店铺网址URL批量导入监控出价等数据;

（4）可对监控数据进行排序删选及导出excel表格;

2，多方式获取、查询数据，排序及整理导出

（1）可自定义根据Ebay item Number号码批量导入监控出价等数据;

（2）突破ebay防采集限制，无限制抓取最新实时数据;

（3）获取的数据格式有：来源URL产品网址，Owner,item number,item title,buy it now price,auction price,stock,update time等;

3，可根据用户实际需求定制功能

可定制采集Ebay所有产品图片、名称、价格、详细说明等字段，也可导出成自定义格式，可供自己购物网站使用。

Answer 2

反爬虫机制的触发一般是因为在短时间内多次访问同一个网站，被网站认定为恶意访问。这种情况下可以尝试放慢爬取数据的速度，让速度在网站的允许范围之内就可以。在爬取数据的同时不要对人家的服务器造成一些不好的影响。
亚马逊的反爬主要是封禁IP或者是跳出验证码让同一个IP无法以不正常的速度访问网页从而实现反爬虫.建议放慢爬取速度,在人家允许的范围内爬取