[請益] 如何搞懂嵌入式圖形處理?

作者: wei115 (ㄎㄎ)   2022-09-01 12:41:47
是這樣的
現在的工作需要大量接觸cmos sensor之類的流程
像是soc接收sensor的資料,然後處理之後(轉成h264、MJPEG、縮放大小之類的)傳到電腦或
TFT
上面
雖然也不需要很深入的去修改
但是我幾乎沒有背景知識,只有大學修過一些影像處理的課,用python辨識手勢之類的
然後使用的api也是ic廠自己開發的,沒有資料(ic廠只提供demo+code 反正我連注釋都很難
看到),不知道要從哪裡開始補足相關知識
有沒有推薦的資料或是關鍵字可供參考?
感謝
作者: longlongint (華哥爾)   2022-09-01 12:47:00
github (x去問懂的人最快 但我也不懂
作者: leo08210917 (leo)   2022-09-01 12:51:00
FFmpeg 編碼解碼流程?
作者: longlongint (華哥爾)   2022-09-01 12:51:00
台大莊永裕的 計算攝影學 會符合你的需求嗎
作者: s678131 (Mu)   2022-09-01 12:59:00
如果他們沒有提供文件就直接開case去問啊
作者: l8th (1931)   2022-09-01 13:17:00
cmos進來是raw data. 通常是rgb or YCbCr. h264這些是codec.codec中的encoder會吃raw data然後吐出compressed bitstream. 用這些keywords 去查應該就會了解整個流程
作者: rocking5566 (搖滾56)   2022-09-01 17:06:00
去查一下isp的image pipeline吧https://zhuanlan.zhihu.com/p/98820927?utm_id=0Isp就是處理cmos sensor的晶片Isp輸入cmos sendor的bayer pattern,輸出rgb,至於後面的視訊壓縮,那是別的晶片再處理的事Sendir->sensor
作者: hizuki (ayaka)   2022-09-02 09:46:00
工作內容是AE還是要開發 camera or codec?
作者: jk21234 (BL2400PT真不錯)   2022-09-02 13:00:00
#1A6mxxA1 (PC_Shopping) 以前寫過webcam運作初步
作者: fgkor123 (n(N))   2022-09-06 03:36:00
可以先看python 怎麼處理,主要是格式很多,ic廠名稱命名很亂之後看妳要處理的格式去看一下雙線性插值,放大縮小之後還會需要一點流媒體的知識,圖片反正就422、411、565、888、8888,注意位元數和格式。流媒體的話先補點基礎網路知識,再開始看h2格式,以h264為例ibp 幀、理解位元-》圖-》動畫,依序一步步中間資料是怎麼傳遞,然後為什麼網路狀態不好或是省流量要用哪種方式,圖片有掉幀或太慢連線被取消怎麼解決大概4這樣,如果要取骨架或是判別圖片內容,又是另外一回事matlab 也可以輔助試驗啦,這種書會著重在理論上然後如果你不幸平台只上rtos 的話,就很累,因為此時要注意的是資源緊張
作者: bmiss (花草七下)   2022-09-08 20:12:00
Gstreamer也是可以用
作者: kojirou (海到無邊天作岸)   2022-09-14 15:42:00
影像相關的東西,如果是Linux先看V4L2吧?更底層跟硬體相關的基本上都是SoC vendor負責了

Links booklink

Contact Us: admin [ a t ] ucptt.com