爬蟲大師請進

作者: sustainer123 (caster)   2024-10-13 19:47:14
最近在看學校
我就想說自己寫個爬蟲 把一些什麼開始日期 截至日期 要幾封推薦信這類資訊整理起來
但每個學校網站長得都不太一樣
又不像寫好的政府資訊庫api
抓特定欄位就能拿到資訊
要慢慢看html找需要的東西
所以有沒有什麼ai爬蟲工具能用R
我丟網站給他 他能給我PY的code
之後我能拿這段code取得資訊
我再去做資料處理跟儲存
像這樣的工具
作者: v03516020 (露露貝爾)   2024-10-13 19:48:00
完了我只記得要遵守robot.txt看看gpt能不能幫你寫個
作者: sustainer123 (caster)   2024-10-13 19:50:00
我是想直接貼網站讓他生code chatgpt又不能看網站貼網址
作者: cities516 (安安路過)   2024-10-13 19:52:00
我都直接開網站然後按F12 人工爬蟲
作者: sustainer123 (caster)   2024-10-13 19:52:00
理論上我要完成任務就是要人工爬蟲 但我懶所以才想說現在有沒有這類酷酷的工具沒有的話那我還是人工爬

Links booklink

Contact Us: admin [ a t ] ucptt.com