Question

Java 的模拟浏览器有哪些好用的

小弟在用java写一个小小的蜘蛛，因为现在的网站很多都是js加载的内容，所以得用可以解释js的模拟浏览器，用过htmlunit ，但效果很一般，。还有其他好的吗？或者什么插件也行。给我介绍下吧大大们。小弟新手

Answer 1

这个不能匹配到ajax请求的数据的链接后，直接用java模拟请求这个链接获取数据么。。非要整那么复杂。。

追问

貌似我没说到ajax，也不想复杂！对于一个新手自然是很多地方不懂。好吧，就按你说的，“模拟请求这个链接获取数据“，当程序爬在一个未知的新网页，难道它告诉你有几个额外加载项？你需要正则去找吗？就算你找到，哪你又怎么知道这个js加载项是载入页面后立即自动加载还是人为？？？请问您这样简单吗？