台灣最大程式設計社群網站
線上人數
1358
 
會員總數:240343
討論主題:186342
歡迎您免費加入會員
討論區列表 >> PHP >> phpquery
[ 變換順序 ]  
[我要回覆]
1
回應主題 加入我的關注話題 檢舉此篇討論 將提問者加入個人黑名單
phpquery
價值 : 50 QP  點閱數:260 回應數:2

樓主

shin
門外漢
0 1
4 0
發送站內信

請問各位前輩

用phpquery如何抓取動態網頁內容

我要抓取一個網站內容

但是它的內容需要選擇選項之後按送出鈕 內容才會出現 好像是用ajax




搜尋相關Tags的文章: [ phpquery,抓取動態網頁,網路爬蟲 ] ,
本篇文章發表於2017-03-10 12:26
別忘捐VP感謝幫助你的人 新手會員瞧一瞧
1樓
回應

浩瀚星空
捐贈 VP 給 浩瀚星空 檢舉此回應
動態式網頁內容是無法抓取的。

這是一種防抓網頁頁面內容的技術。
目前並無任何技術可以取得動態載入出來的內容。

除非你找到他的ajax的參數。看能否可以從中獲取它load的資料。
本篇文章回覆於2017-03-10 17:03
== 簽名檔 ==
--未登入的會員無法查看對方簽名檔--
2樓
回應

Ricky是我
檢舉此回應
一般大數據(砍站)分析神器都會用到 phantomjs 這類 headless 的瀏覽器把 html 內容砍回來。
即使對方網站會判斷瀏覽器,也還是可以透過 selenium 加上 chrome / ie / firefox ... 使用真實瀏覽器去把網頁內容爬出來。
本篇文章回覆於2017-03-16 09:57
== 簽名檔 ==
--未登入的會員無法查看對方簽名檔--
[ 變換順序 ]   
1

回覆
如要回應,請先登入.