[問題] Java爬延遲加載的網頁

作者: bobyang79 (蔥哥)   2015-05-05 17:33:59
目前主要是想爬YouTube上的聊天室內容
目前看網頁原始碼感覺應該是可以爬的
Youtube設計上內容一開始是"加載中..."
要過一段時間才會變成聊天室內容
但目前用Java或Jsoup去爬好像都會抓到網頁一開始資料
"加載中..."
不知道有沒有辦法做延遲讀取之類的
有嘗試過先connect後sleep(10000)再get
不過似乎還是不行
作者: kentyeh (kent)   2015-05-06 09:26:00
用 htmlunit ,但就不能用Jsoup了

Links booklink

Contact Us: admin [ a t ] ucptt.com