[問題] 想請教學網路爬蟲前的預備知識有哪一些?

作者: jamesxxx1997 (黃~)   2017-10-07 00:23:47
各位大大好,新手想在此請教一下,若想學習網路爬蟲,有哪些先備知識要先會呢?
也想知道,應該學多深
(像是我知道好像要先學HTML和CSS,不過不清楚應該學到哪個程度,javascript亦然)
謝謝各位大大~
作者: neil987 (R5大小姐-EX人品崩壞)   2017-10-07 12:04:00
學會看youtube跟google查東西
作者: lizkarina (lizka)   2017-10-07 13:10:00
首先網路連線要懂一點,tcp/ip, udp. 怎麼用socket.tls/ssl. http protocol(get,post...)/headers/cookieshttp status code. https(http over tls). 如果要取的資料用javascript生成,你就需要web driver.#webdriver. 再來看你取的資料是html,json,圖片,影像或是音樂,再學相對應的知識。
作者: jamesxxx1997 (黃~)   2017-10-07 18:09:00
謝謝neil大的解答,收穫良多~好的,謝謝l大,你的意思是說其實這是一個很廣泛的東西對吧,那我就先照你說的,學西一些網路連線的概念,感謝~
作者: sean50301 ( (づ′・ω・)づ)   2017-10-07 18:35:00
稍微了解一下css跟xpath就可以爬簡單的網頁了
作者: areyo (沒有名字的怪物)   2017-10-07 19:16:00
大數學堂
作者: f496328mm (為什麼會流淚)   2017-10-08 06:37:00
https://goo.gl/V41YL2學爬蟲 推薦這串影片 講得蠻好的
作者: goldflower (金色小黃花)   2017-10-08 16:07:00
大數學堂無敵 真的應該不會看到比這邊還詳細的影片了
作者: vi000246 (Vi)   2017-10-08 16:24:00
正規表達式也可以學一下 會方便很多
作者: f496328mm (為什麼會流淚)   2017-10-09 00:34:00
正規可以說是必備
作者: jamesxxx1997 (黃~)   2017-10-09 13:17:00
恩恩,現在正在學正規表達式(re模組)謝謝各位的指導XDD
作者: mantour (朱子)   2017-10-20 20:27:00
先找一個你想爬的網站,然後用到什麼學什麼

Links booklink

Contact Us: admin [ a t ] ucptt.com