問(wèn)題描述

網(wǎng)址：http://quote.eastmoney.com/ce...我想爬所有頁(yè)的名稱數(shù)據(jù)，（這里只有兩頁(yè)），判斷有沒(méi)有下一頁(yè)的條件該怎么寫呢？代碼：

from selenium import webdriverdriver=webdriver.PhantomJS()url=’http://quote.eastmoney.com/center/list.html#28003684_0_2’driver.get(url)usoup = BeautifulSoup(driver.page_source, ’xml’)n=[]while True: t=usoup.find(’table’,{’id’:’fixed’}) utable=t.find_all(’a’,{’target’:’_blank’}) for i in range(len(utable)): if i % 6 ==1: n.append(utable[i].text) if #停止條件怎么寫: break driver.find_element_by_xpath(r’//*@id='pagenav']/a[2]’).click() usoup = BeautifulSoup(driver.page_source, ’xml’)

后面這里就不會(huì)寫了。。。

問(wèn)題解答

可以判斷每一頁(yè)的條目，每一頁(yè)共20條，如果當(dāng)前頁(yè)不足20條的時(shí)候，說(shuō)明此頁(yè)是最后一頁(yè)了，爬完當(dāng)前頁(yè)就該停止了

話說(shuō) 這個(gè)表格不是都有個(gè)jsonp的返回接口嗎？為什么還要爬？

走的就是jsonp接口，直接拿就好了。

非要抓取的話，只能用selenium + phantomjs 之類的模擬頁(yè)面去獲取了。

http://nufm.dfcfw.com/EM_Fina...{rank:[(x)],pages:(pc)}&token=7bc05d0d4c3c22ef9fca8c2a912d779c&jsName=quote_123&_g=0.5385195357178545