[問題] 米特的穿搭版該怎麼爬呢？ johdju88 PTT批踢踢實業坊

[問題] 米特的穿搭版該怎麼爬呢？

作者: johdju88 (阿姆斯雷龍) 2020-03-12 20:38:41

如題
米特是一個高中生的論壇
https://meteor.today/board/styling
因為我最近想要學習年輕人的穿搭風格想利用爬蟲抓一下
已經知道是用Beautfulsoup還有requests來抓了
可是我看html.text裡面沒有每一篇的文章連結？
其他的部分基本上都ok 我會用 selenium 的Webdirver來click"更多文章"
點進文章之後的圖片網址我也能用正則表達式子下載下來
現在就是差把每一篇文章的網址找到了....
新手請教各位前輩謝謝!!

作者: TakiDog (多奇狗) 2020-03-12 21:00:00

用requests吧F12 Network的部分在看一下，一定在哪有圖片的url

作者: alvinlin (林矜業) 2020-03-13 00:57:00

看起來是JS的問題。要研究研究

繼續閱讀

[問題] 請問CookieJar如何取某NAME值piligo [問題] google calendar api失敗ewtmshu [討論] 學習python或相關開發工具之平台nicha115 [問題] pyinstaller 報錯MAGICXX [問題] 新手詢問pandas問題Obserea [問題] python新手，想請教發佈程式問題大哉問shou666 [問題] 自學下一步hellokidding [問題] pyramid很少人在用嗎Uni0608 Re: [問題] bokeh與matplotlib, 互動式圖片iamfenixsc [問題] Pandas 指定條件修改內容ctr1