大家有没有抓取过网易的跟贴页

linwenbin 2010-09-03
分析了下页面,没发现页面上的数据在哪里放着。
有人做过类似的吗
onlylau 2010-09-05
应该是Web2.0的页面,用的是Ajax的~也就是异步的  得将页面解释完后再提取信息

可以通过调用WebBrowser或者JRex等等模拟浏览器对获得的页面再进行解释分析,得到最后我们所真正看到页面的代码,然后进行解析

这是思路,没有具体实施过,而且关于Ajax的网站是各种各样,所以我的这个方面也不能一应俱全
pheh 2010-09-06
可以用Visual Sniffer之类的工具抓取一下页面显示时ajax都调用了那些页面,分析一下这些链接,就会找到页面上的数据
Global site tag (gtag.js) - Google Analytics