读书人

网络爬虫怎么自动调用网页中的JS函数

发布时间: 2012-02-15 12:09:43 作者: rapoo

网络爬虫如何自动调用网页中的JS函数
自己写了一个网络爬虫,用于抓取某个网页,但是这个网页的内容很多,通过JS分页.现在我只能抓取到第一页的内容.
分析html代码,发现它其中有一个onclick函数,可用于翻页,请问能否在我的爬虫中自动调用这个onclick函数,我的爬虫是拿httpclient做的.

[解决办法]
直接分析它的js方法传了哪些参数,然后带上这些参数去请求页面也可以吧?

读书人网 >Java Web开发

热点推荐