[問題] 爬蟲新手問題 renshin PTT批踢踢實業坊

[問題] 爬蟲新手問題

作者: renshin (阿信) 2018-07-04 15:33:34

請教各位前輩們
目前想寫一個簡單爬蟲程式
但在第一關就卡住
我要爬的網頁，會先跳出對話框輸入帳密，不是login網頁的那種
我該用甚麼語法或套件，將我的帳密post上去通過驗證呢?
google好久還是查不出來
麻煩大神指導，感謝
範例假設：
url="www.xxxxx.com.tw"
帳號:aaa
密碼:1234

作者: MAXCAI (國王的抽鬼牌) 2018-07-06 10:41:00

可以考慮先登入然後抓包看看，或是先從不用登入的網站開始，若只是想抓這個網站，可以網址po上來或許有人可以幫忙。

作者: gauss02 (gauss02) 2018-07-04 16:52:00

http://en.wikipedia.org/wiki/Digest_access_authenticn希望對你有幫助

作者: b24333666 (比飛笨) 2018-07-07 22:08:00

我記得request.post()好像可以

繼續閱讀

Re: [問題]關於移植 code from python 2.7 to 3.6TuCH [問題] 原本爬的網站突然不能爬了，請教一下bckkt [問題] python 資策會機器學習班william0916 [問題]關於移植 code from python 2.7 to 3.6wayne670225 [問題] 抓取Dataframe的索引值piyieen [徵求] 外包案件-網頁資料整理leuxeon [教學]Python程式教學-基礎、套件、爬蟲s960405s [問題] 新手print不出東西EasonWW [問題] 讀取dataframe中某一列某一行jasonfghx [問題] design pattern請益suhang