Question

为什么很少人讨论或者使用java爬虫

Answer 1

1、爬虫的经济价值在哪里？只有经济价值存在的情况下，才有必要去开发这样一个爬虫。但不幸的是，现在的很多场合下，爬虫没有太大价值。仅有：比价，数据统计，搜索引擎，信贷爬虫等有限的几个场合在用，而这几个场合基本被大公司垄断了。所以现在很少有人写爬虫了。
2、写个爬虫的难度有多大？一上午，仅此而已。所以没什么难度，顶多设置一下userAgent,设置一下refer，弄个调用顺序先获得cookie，设置个延时什么的。换成金钱看，估价大概价值三四百块吧，用不了多钱。
3、爬虫能用多久？很久很久，只要被爬的系统不升级，那么就能一直用下去，换话说：写一个爬虫，用半年是很常见的事情。很常见就意味着没什么太大意思，不受人关注

Answer 2

爬虫最多的用Python，

其次是nodejs

就java的爬虫库尽管很多，质量好(很多都是大神主导，做搜索引擎都一整套成熟系统)

奈何java成本高呀

数据时时在变，热点，舆情分析

Python堆人快(nodejs没有Python环境，社区，组建 高度成熟)