Re: [問題] 抓 google 網頁的搜尋回傳結果 purplvampire PTT批踢踢實業坊

Re: [問題] 抓 google 網頁的搜尋回傳結果

作者: purplvampire (阿修雷) 2019-06-10 23:34:55

小弟也有類似的問題想請教前輩們，是針對搜尋結果的前幾個網站連結做抓取，
試過書上用bs4的選擇器soup.select('.r a')抓不到連結，上網查最新的選擇器
soup.select(div.g > h3.r > a[href^="/url"])也是抓不到網站連結
http://bit.ly/2WshWEH
CSS資料
https://i.imgur.com/XYYotok.png
請問我該如何正確抓取Google搜尋結果的網站連結？

作者: wsybu (%小步步%) 2019-06-11 13:19:00

有用selenium抓嗎?google search結果頁面在不能使用js的情況下是另一個版型

作者: TakiDog (多奇狗) 2019-06-13 11:12:00

你requests html存出來看...有api能用就找api

繼續閱讀

[問題] DBSCAN是否可以直接處理時空資料lh1122 Re: [問題] 請問關於tkinter的問題vvbird [問題] while迴圈無法重複cc9630r [問題] 襪子題的解題邏輯AmigoSafin [問題] python3 寫入txt時去除顏色代碼noshare [問題] 網頁抓不下來purplvampire [問題] 請問關於tkinter的問題alubasteve donesunherbcat [問題] autoencoder相關問題paul09253336 [問題] 用modulus看是否整除不知道哪裡出錯?AmigoSafin