比如http://www.plasway.com/search/search.jsp，点下一页，网址不变，怎么办呢？我们下载个小软件http://www.yao26.com/VisualSniffer.rar，截取点击下页时候网卡发送出去的数据，把参数抓到就行了. 比如这个网站，抓到的参数类似 PTURNOVERMODE=2&PCURRENTPAGE=7，7表示第7页，我们把参数带在网址里就行了http://www.plasway.com/search/search.jsp?PTURNOVERMODE=2&PCURRENTPAGE=7 这个网址就是第7页了。 下页网址就被破解出来了，就可以按正常抓取了。有些网站比如51job的不能带在网址参数里，就需要这样表示了：http://www.plasway.com/search/search.jsp?[post]PTURNOVERMODE=2&PCURRENTPAGE=7[/post],post之间的表示要提交的数据。
再举一个例子，http://www.ecfang.com/yahoo_esfang/search/search.php?action=%CB%D1%CB%F7&pageno=1
下页网址看不到，实际上pageno=2就是第2页了。也是用那个小软件抓到的参数。 |
