[心得] 給板友們,選磁碟陣列產業的考量

作者: eisenccw (板標白馬)   2018-10-21 19:50:00
給板友們,選磁碟陣列產業的考量
有錯/有問題的地方,還請指正~
全文講的都是韌體的研發人員,不分企業
內容大多是10多年前的印象,大多數是觀念性的東西,Google很容易找到,希望對板友們
能有一點點貢獻
磁碟產業的核心有3個,每家企業重視的都不同
1.韌體
2.硬體
3.軟體
Host side(韌體)
這是指電腦端的東西,這個部份有Fiber、SAS、SATA、iSCSI等,因為很久沒有關注了,
寫這篇文章的時候,有稍微上網Google一下。
Host side的技術跟使用的晶片與晶片的驅動程式有關,因此有些企業或產品會指定只能
用什麼型號的 HBA(host bus adapter)卡,也就是RAID卡,是有原因,因為開發成本超高
,還要取得授權。
身為研發人員的你,或許要了解這些晶片與驅動程式的東西,再配合自家企業寫的Host
side的韌體
Fiber
是裡面價格最高的產品,相對的它的難度也是高,台灣真的有硬實力能力做好Host Fiber
的RD非常少,大多RD都是在國外
為什麼說他難度最高,因為研發Fiber所需要的設備、韌體、硬體、軟體的成本都非常高
,而且人非常難以培養,通常可以培養起來的RD,跳到國外之後,薪資馬上起飛,一些中
大型以上的機房都是用Fiber,我看過得機房至少有20座以上,每座機房至少有10個以上
的機櫃,機器塞好塞滿,70%的機櫃都是Fiber
SAS
SCSI的下一代協定,早期有一堆人做SCSI,包含國外,因為是從SCSI升級,所以,有些
Code也是直接升級,因此SAS,台灣的硬體與韌體技術相對穩定,進入企業之後,這是比
較有可能接觸到的東西。
SATA
ATA的下一代協定,門檻較SAS再低一點,不過,SATA的傳輸速度是追著SAS,eSATA這個我
也算同一類,這個東西印象中也蠻多人做的,算是很競爭,進入企業之後,這是比較有可
能接觸到的東西。
iSCSI
走IP的協定,以網路線連結磁碟陣列,是走TCP/IP,影響最大的應該是從 IPv4 改為
IPv6,與線材,無論什麼產品說它的速度有多快,全部都是看線材與那顆網路晶片,常
見的是Cat6、cat7,不知道Cat8出來了沒。
印象中這個產品台灣有,但是真的在機房裡面是比較少見,看起來似乎很容易、很方便,
但是在設定上比較麻煩。
PCIe
我對這個不熟,但是我不看好
USB
這個目前沒看到特別的東西,不過,這個東西是大眾最了解的東西,最容易被人使用
總結:
1.關注Host端的速度,如果有繼續提昇,表示這個產業才有持續升級,如果沒有,這個產
業就死90%,企業只能削價競爭,或往其他領域經營
2.做Fiber的身價比較高,但是,企業不一定有能力做
3.如果Host side的通訊協定沒有升級的話,那相對比較難詳細接觸到Host的東西,有升
級就會改版,有改版就有Bug,有Bug才鍊得出真功夫
4.讀Code會很硬、很累,因為不一定有shadow code 可以看
5.從HBA(host bus adapter)的價格,就可以知道哪個技術門檻比較高
6.界面升級,就是加班的無限地獄
Drive side(韌體)
這是指硬碟端的東西,這個部份有Fiber、SAS、SATA等,或許還有SSD、SDcard等新的儲
存硬體,這裡印象中有演算法。
從Host side接收資料,來到Drive side就會開始演算,將切割資料好,分別放在硬碟裡
面,已達到保護資料的目的。
每家企業所使用的演算法都是高階的研發人員才知道,通常這個也會簽保密協議。
Fiber
雙通道,最貴的硬碟,效能據說也最好,不一定最多人用,會買這種硬碟組成的 Disk
array 都是大咖,也能賺最多,但是台灣好像沒人賺的起。
SAS
雙通道,比較多人使用。
SATA
單通道,通常會加1片1對2通道,變成雙通道,比較多人使用,這個就便宜了。
演算法
通常產品的演算法早就已經定死了,而且可能是由研發長、研發經理這個位置的人親自寫
的,這個演算法與純數學有關,如果你想接觸這塊,除了數學好之外,資料架構的能力要
強。有傳言演算法是可以買的,不過我沒求證過。
雙通道
這個功能是為了避免硬碟的通道突然損毀,一般來說,一般的硬碟只有會一個通道,像
SAS就有2個、SATA就只有1個。
因為有了雙通道的關係,對於硬碟資料的保護可以有更多的運用,有的中間會在串接一些
路由器(Router)、交換器(Switch),保護硬碟不會因為單通道毀損就shutdown
總結:
1.演算法你不一定碰的到
2.這是Host side 與 Drive side 互相丟資料的遊戲
3.硬碟的界面升級就是加班的無限地獄
4.硬碟新界面的出現,也是加班的無限地獄
其他:
1.Disk array 還有什麼樣的功能,各家都不同,有的有機會接觸演算法。
2.軟體、硬體我不清楚。在台灣這個產業是有機會養老的,只是會很辛苦。
3.監控系統,其實這是演算法的延伸使用,因為影像也是資料的一種,不過,這個部份的
產品線很微妙,我個人覺得只是擺好看的而已
以上
拉里拉雜的寫了一堆,希望在你評估職涯的時候,能多了解一下市場,為自己的人生多思考一
點,這才是科技~
作者: chouvincent (我肥宅 我驕傲)   2018-10-22 12:07:00
Pcie 火熱一陣子了吧
作者: providence (providence)   2018-10-22 14:11:00
第一次看到PCIe被忽略成這樣= =
作者: Westan   2018-10-22 14:48:00
原po普安?
作者: benden (20%/y的蝸牛)   2018-10-21 19:57:00
作者: kkoouu (LL)   2018-10-21 20:35:00
作者: os369510 (Jeremy)   2018-10-21 20:44:00
內容沒什麼深度.. 有心寫不忍噓 也可以多了解PCIe
作者: eisenccw (板標白馬)   2018-10-21 21:05:00
確實是沒什麼深度補充,我接受噓文
作者: gn01216674 (Dog)   2018-10-21 21:14:00
真的不忍噓...
作者: GodIronman (格林皮卡丘a鐵)   2018-10-21 21:22:00
分享就給推!! 讓不同產業的朋友們也能增廣見聞一下
作者: cplusplus426 (c++)   2018-10-21 21:47:00
重點應該不是這些規格的東西八= =
作者: mercurycgt68 (發芽的吉它手)   2018-10-21 21:52:00
你對 PCI-e 誤會蠻大的 要不要利用原有的基礎 不帶成見地重新理解產業現況呢?
作者: MullerLu1981 (阿賢)   2018-10-21 21:58:00
NGFF PCIe NVMe 4 lane M.2 2280 組成的磁碟陣列系統,目前intel 正在努力宣傳他的產品。
作者: cloudchiou (cloud)   2018-10-21 22:20:00
不是雙通道 是雙控制器
作者: EZ5566 (料理是帶給人們幸福的)   2018-10-21 22:34:00
我不是研發人員,不過我看到我的客戶PCIe儲存需求越來越高
作者: erial (erial)   2018-10-21 22:43:00
好些的PCIe SSD一塊十來萬呢
作者: ReiFu21 (ReiFu)   2018-10-21 22:43:00
我個人是......看不懂就不要盲推了 哈哈
作者: ljmk1246 (ljmk1246)   2018-10-21 22:51:00
何不自己回一篇文 在推文酸還真有高度呢
作者: CIIIO (郭+)   2018-10-21 23:24:00
已存最愛
作者: gigisteve (阿吉Q)   2018-10-21 23:49:00
台灣的韌體都是整合比較多嗎? 我去面試時面試官提到韌體走研發的比例非常少......
作者: tyfu (慎)   2018-10-22 00:22:00
的確十年多前的..很多東西漸漸式微了..現在比較有話題的是NVMe over fabrics但在台灣的確是冷門產業,沒什麼人關注,有心還是出國吧看得到、摸得到、聽得到,這些才是短視近利的老闆們想要的
作者: harn1991 (qwe0000)   2018-10-22 00:35:00
以後應該都是PCIe
作者: bcew (bcew)   2018-10-22 00:36:00
各protocol的理解可以再去看一下近幾年的科普文較好,還有通道方面也是看一下RAID的內容。未來的趨勢有蠻大的機率是NVMe,走PCIe;fiber或網路...
作者: tyfu (慎)   2018-10-22 00:43:00
比起這、個人是對Persistent Memory對產業的衝擊比較期待過往OS跟APP慣用的記憶體不再是揮發性儲存時,很多習慣都必須因應新的架構做出對應的調整NVMe有點像是過渡性的需求,只是NVM真正當Memory使用的前奏真要當儲存用,多的是企業在做All Flash Array,也不需NVMe
作者: hanshsu (小肉呆)   2018-10-22 08:12:00
目前比較潮的是 all-flash 未來很難說 儲存媒介好像快要有新突破惹
作者: morrischen (porsche~my drive)   2018-10-23 00:26:00
RAID硬體核心,xor asic才是王道,再+周邊韌體軟體tool
作者: glowbu (只是個說法)   2018-10-23 22:04:00
字多辛苦了,深度讓版友們自行google

Links booklink

Contact Us: admin [ a t ] ucptt.com