Re: [問卦] 大數據跟統計有啥不一樣嗎?

作者: starcraftiii (星海爭霸三)   2015-07-01 23:11:15
大數據的定義就是
收集到足夠多的資料就叫大數據
大數據難的不是資料量
難的是你要用什麼樣的數學模型
去知道某兩筆以上的離散數據
有到什麼樣程度的關係性(依不同的數據有不同的檢定方式)
※ 引述《ilovedandan (歐陽妮妮忠實熱血粉絲)》之銘言:
: 最近新聞上真的很常看到這個名詞 Big data
: 身邊的人也常用到這個詞
: 但有點想問統計跟大數據有甚麼不一樣?
: 因為總覺得現在人家口中說的"big data"
: 不過就是一般個人電腦用EXCEL就跑得出來的統計結果而已嗎?
: 那跟以往的統計有啥不一樣?
沒有不一樣,大數據分析就是用統計分析
: 畢竟一般人能取到的資料庫就這麼大而已
: 而且分析出來就跟以往一樣,最後也找不出甚麼因果關係
個人問題
: 但報告的時候講出Big data好像很厲害耶
: 所以實在很好奇這兩者有甚麼不同
巨大量的數據你硬要分析其中的前因後果,理論上做的到
但通常都是npc以上的難度
除非量子電腦實作化,不然以人類有限的資源無法做到這件事
回到大數據的分析方式
你要用什麼樣的數學模型,用什麼樣的檢定指標?
大家都知道資料量只要足夠多,就可以有一定信心水準的準確度來
做到未來預測一件事到一個門檻準確度
問題是how to do this? how could it be?
巨大數據分析的定義是足量的數據
足量的數據是足量以分析到所需準確度以上的的足量
所以我反問你,你需要多大量資料去統計? 你要用什麼指標去分析? 然後達到多準的預測?
作者: kamisun (水銀燈的主人)   2015-07-01 23:12:00
要考慮不同國家的水準,像台灣的醫療水準比美國強好幾倍
作者: Homeparty (認命,知命,然後聽天可也.)   2015-07-01 23:12:00
要考慮假資料有多少
作者: lingon (林果)   2015-07-01 23:13:00
所以講到最後還是統計/CS...... XD
作者: johnhmj (耗呆肥羊)   2015-07-01 23:14:00
專業文
作者: wt5566 (commend & comment)   2015-07-01 23:14:00
主要還有即時性的不同,一般統計比較不會統計即時性data大數據則是時時刻刻收集統計
作者: TheAVKing (I am the AV King!)   2015-07-01 23:15:00
作者: kimfatt (kimfatt)   2015-07-01 23:20:00
知道邏輯怎麼算可以得到什麼叫統計,不知道會產出什麼叫大數據 (跑出來的交聯分析還不知道靠不靠譜)
作者: ko7811520 (ce)   2015-07-01 23:27:00
其實風水氣候就是統計而來的吧
作者: FIRZEN45 (得到n個冷 n->∞)   2015-07-01 23:37:00
大數據不是說有幾個V來着的…

Links booklink

Contact Us: admin [ a t ] ucptt.com