[問題] 網頁爬蟲

作者: juust (juust)   2018-07-30 22:44:27
各位大大好
我最近在學習爬蟲
目的是要從thingspeak網站上獲取資料
首先要登入
我到輸入帳號 next 都沒問題
但是到要輸入密碼的時候一直卡住
我是用selenium套件中的xpath來定位
再找問題的時候發現
網頁中把login的 style設成none
導致在login下的element都無法讀取 如圖:
https://imgur.com/ay6Uc48
我有google過相關解法
但是網路很多網頁範例都是把style 跟要隱藏的元素寫在一起
所以解法都像是:
“//OOO[@id='XXX' and (contains(@style,'display:none'))]"
沒找到分開寫的
還請大大指導一下 感恩
作者: TakiDog (多奇狗)   2018-07-31 01:33:00
1.拉整個html丟BS4 2.直接用requests之類 selenium不見得好用用css-selector看看吧

Links booklink

Contact Us: admin [ a t ] ucptt.com