Question

怎么基于nutch进行二次开发，比如说需要通过java来控制nutch的爬虫深度

怎么基于nutch进行二次开发，比如说需要通过自己编写的java来控制nutch的爬虫深度，指定nutch爬虫的种子URL，输出结果路径等等，等待解答。。只能悬赏这么多了

Answer 1

1、我上个月正好基于nutch做了个爬虫系统，效果还不错。
2、其实你的要求很简单，先试用nutch，然后看下nutch源码，然后截取数据流就可以了。
3、严格来说，nutch是由爬虫+map/reduce组成的，而mapreduce部分不需要你改动，你只要把它的爬虫和数据流看懂就可以搞定了。
再看看吧。