[問題] 從網頁抓取資料

作者: bbsx (WHISKY 君)   2016-01-29 07:18:23
不好意思 第一次來這邊就是麻煩大家
我想請問一下怎麼從網頁抓取資料
網頁的資料是從這邊連結過去的
http://rivergages.mvr.usace.army.mil/WaterControl/stationinfo2.cfm?sid=01100Q&fid=&dt=S&pcode=QR
從這個頁面選取 開始/結束的 時間 然後選擇表格(Tabulte)
舉個例子 我想要 2016/01/28的資訊
我要在from 選 Jan 28 2016 也要在 to 的部分選擇同樣的時間
然後他會進入一個新的視窗
我想要得到 Date/Time 和 Flow(CFS)的資訊
不知道有沒有人可以跟我說要怎麼做 或者是去看 哪個module來做嗎?
謝謝
作者: ckc1ark (偽物)   2016-01-29 09:25:00
先用chrome的developer tool看一下 network做哪些request
作者: Kadai (龜)   2016-01-29 10:11:00
request + bs4
作者: xsssxxzz (阿群)   2016-01-29 18:03:00
看看可不可分析一下url裡有沒有可以加入日期的字串。如果可以就可自動化抓
作者: bbsx (WHISKY 君)   2016-01-29 20:46:00
網址沒有。他應該是用java submit request

Links booklink

Contact Us: admin [ a t ] ucptt.com