這是新年的第一天，也是我們應(yīng)該總結(jié)過去的1天；伴隨著滿屏的“新年快樂”，奧唯思在祝福聲中，向您匯報(bào)我們《2023年的工作總結(jié)》。

這是奧唯思的第一年，因?yàn)槲覀兘K于開始了我們的說好的事業(yè)。

但這也是艱難的第一年，不僅因?yàn)槿f事開頭難，也因?yàn)楹笠咔闀r(shí)代，國內(nèi)經(jīng)濟(jì)從未有過的低迷，半導(dǎo)體雪崩的今天，我們承受著初創(chuàng)企業(yè)未曾有過的坎坷與困難。夾雜著強(qiáng)烈的求生欲望，我們不希望自己倒在起跑線上。

相比未來，也許當(dāng)下又是經(jīng)濟(jì)好的一天，因此我們同樣沒有再來一次的機(jī)會。乘上了這條船，走上了這條不歸路，我們未曾想過退路；即便風(fēng)雨兼程，我們也只能堅(jiān)持走下去，走出一條屬于奧唯思自己的路。

---

回首2023，我們做了很多的嘗試，或?qū)蝈e(cuò)，于公于私，只為能夠堅(jiān)挺走完奧唯思的第一年：

2023.2月，我們租下了南山睿園的一個(gè)辦公室。沒有投資，沒有規(guī)模，甚至沒有采購辦公桌椅，隨著南下的兄弟到位，我們開始踏上了這條不歸路：2個(gè)人，2個(gè)電腦，2個(gè)不認(rèn)命的程序員。

萬事開頭難，我們沒有可下蛋的雞，甚至沒人聽說過奧唯思成功不能借鑒，但失敗可以學(xué)習(xí)；試錯(cuò)成本很高，但這無法避免。憑著人均15年的FPGA開發(fā)經(jīng)驗(yàn)，因此我們開始了一切可能與不可能的嘗試。

<1>FPGA圖像類開發(fā)板

1）易靈思FPGA圖像開發(fā)板

由于易靈思獨(dú)特的低功耗以及在MIPI RX/TX領(lǐng)域的IP，在圖像行業(yè)有著較大的優(yōu)勢。同時(shí)也因我們的出生（為FPGA圖像而生）我們嘗試著設(shè)計(jì)Trion 40nm系列T35，以及鈦金16nm系列Ti60的FPGA圖像開發(fā)板，專門針對MIPI采集顯示，以及攝像頭開發(fā)等客戶提供易靈思FPGA開發(fā)平臺，如下所示（目前淘寶上銷量第一的易靈思FPGA開發(fā)板）：

鑒于我們的成果與付出，我們成功援助了11月份的FPGA設(shè)計(jì)大賽(易靈思）；同樣也感謝易靈思對我們的認(rèn)可：我想，互惠與利益，都是相互的。

2）紫光FPGA圖像開發(fā)板

在控制領(lǐng)域，或者說非MIPI應(yīng)用、非低功耗領(lǐng)域，紫光同創(chuàng)的產(chǎn)品其實(shí)也有一定的優(yōu)勢；加上目前國產(chǎn)FPGA規(guī)模大，份額大的也是紫光同創(chuàng)，因此我們也想嘗試著想拓寬一下國產(chǎn)FPGA的應(yīng)用。鑒于此，在原廠銷售的支持下，我們設(shè)計(jì)了基于Logos2  100K FPGA（PG2L100H676）的視頻圖像處理開發(fā)板，填補(bǔ)了紫光同創(chuàng)在圖像行業(yè)的FPGA開發(fā)板解決方案空缺，如下：

我們想著在有限的時(shí)間內(nèi)，如果能盡可能地幫助大家在FPGA圖像解決方案的落地，這也是我們奧唯思存在的價(jià)值。因此耗時(shí)數(shù)月+幾個(gè)版本，終于落地了一套100K的FPGA圖像開發(fā)板。

由于某些原因，承受了一萬點(diǎn)打擊的我們，只能很遺憾地退出，并且停止了關(guān)于更多紫光FPGA開發(fā)板的研發(fā)及資料的更新（可憐的庫存）。隨后很多采購別家產(chǎn)品的朋友，尋求我們支持圖像與PCIE的設(shè)計(jì)，但我們也很遺憾的表示抱歉了，畢竟我們還得繼續(xù)風(fēng)雨兼程。

此外，由于紫光的PG2L100H676  P2P兼容Xilinx的XC7A100K FPGA，為了不至于讓3個(gè)月的努力打水漂，我們第一時(shí)間推出了Xilinx版本的100K  FPGA圖像處理開發(fā)板，并且100%移植了《基于MATLAB與FPGA的圖像處理教程》的FPGA算法源代碼，如下：

2024即將進(jìn)行的ISP相關(guān)設(shè)計(jì)的教程與培訓(xùn)，將會基于這套平臺，發(fā)光發(fā)熱！

3）思特威CMOS模組

除了Sony與ONSE，傳感器第三家應(yīng)該算思特威，并且在國產(chǎn)圖像應(yīng)用領(lǐng)域，思特威占了絕大部分的國產(chǎn)份額。因此支持國產(chǎn)，同樣我們也希望引入思特威的傳感器。當(dāng)國產(chǎn)FPGA配上國產(chǎn)CMOS傳感器，口感與味道，可以更上一層樓。感謝思特威的SC130GS與SC2210，這兩款傳感器帶動了我們部分平臺的落地，以及在線上線下的銷量。

以下是2023我們開發(fā)的思特威的CMOS傳感器，包括MIPI及DVP接口，以及不同的靶面特性，歡迎感興趣的朋友前來咨詢合作：

奧唯思可提供的完整的MIPI Sensor解決方案，并且已經(jīng)成功交付多個(gè)量產(chǎn)客戶，2024年，奧唯思將新設(shè)計(jì)SC235HS高性能全局200W相機(jī)，敬請期待。

<3>FPGA圖像類項(xiàng)目

1）基于Lattice NX100的SLVS-EC3.0相機(jī)

作為除了MIPI標(biāo)準(zhǔn)外的另一個(gè)重要分支，Sony這些年也在高分高帶寬Sensor上推SLVS-EC3.0接口。該接口目前Xilinx官方?jīng)]有IP，如果還要考慮FPGA的成本，全球僅Lattice一家官方提供了SLVS-EC3.0   IP。為此，我們耗費(fèi)了2023年一半的的人力物力，幫甲方爸爸設(shè)計(jì)基于IMX472的SLVS-EC3.0采集+MIPI發(fā)送CPU的原型樣機(jī)，并且完成了交付。

其中我們耗費(fèi)了1/2的Schedule，在幫Lattice磨EC3.0的IP。由于IP本身比較新，同時(shí)也還沒有經(jīng)過量產(chǎn)測試，我們經(jīng)歷了九九八十一難，在幫原廠修正了數(shù)個(gè)bug后，終于得以調(diào)通此解決方案，成為國內(nèi)第一家基于lattice  SLVS-EC3.0實(shí)現(xiàn)成熟解決方案的公司。

截至目前，奧唯思已經(jīng)成功支持了3個(gè)客戶SLVS-EC3.0的解決方案，并且不斷地完善IP feature之外的內(nèi)容。付出與回報(bào)成正比，感謝Lattice原廠對我們的支持與認(rèn)可，歡迎大家共同探討SLVS-EC3.0解決方案。

預(yù)告：奧唯思自研SLVS-EC3.0 IP也已經(jīng)已成熟。

2）基于易靈思Ti60的SC2210實(shí)時(shí)ISP相機(jī)

甲方爸爸要求全國產(chǎn)USB3.0相機(jī)，因此我們采用了易靈思的FPGA、思特威的Sensor，以及方寸微的T630 USB PHY。當(dāng)時(shí)寫了一篇文章，詳細(xì)介紹了此方案：攜手國產(chǎn)芯，共鑄全國產(chǎn)USB3.0相機(jī)。

該方案的初步實(shí)現(xiàn)花了3個(gè)月，但是各種一場測試的恢復(fù)，又花了3個(gè)月。方案亮點(diǎn)，主要有如下：

• 全國產(chǎn)芯片選型
  

• 自研完成的ISP解決方案

得益于易靈思低功耗高速易靈思FPGA，我們的方案終于落地。該方案在2023華南電子展亮相，ISP效果相比同類FPGA產(chǎn)品，得到一致的認(rèn)可。當(dāng)然這只是個(gè)開始，未來我們還會不斷地優(yōu)化，爭取做到更好。

預(yù)告：

為了支持國內(nèi)良好生態(tài)，助力同胞們進(jìn)行USB3.0相機(jī)的開發(fā)（FTDI或國產(chǎn)T630方案）,我們在再三斟酌下，決定推出全開源精簡方案，包括FPGA的源代碼，以及PC上位機(jī)的軟件程序。開源文件列表如下：

3）基于易靈思MIPI方案接入NVIDIA Jestson

視覺相機(jī)是機(jī)器智能/自動化的關(guān)鍵，NVIDIA  Jetson支持多個(gè)合作伙伴的Camera，這些相機(jī)包括USB、以太網(wǎng)、MIPI等接口的相機(jī)。Jetson為這些相機(jī)提供了完整的Jetpack  SDK，支持用戶可以快速接入這些相機(jī)，來實(shí)現(xiàn)相應(yīng)的設(shè)計(jì)。但NVIDIA的開發(fā)目前有2個(gè)問題需要解決：

• NVIDIA的SDK只支持合作伙伴的Camera，不支持第三方相機(jī)的接入

• NVIDIA的ISP功能沒有開放，全國僅2家公司有權(quán)限。

那么，用戶無法接入parter外的相機(jī)，同時(shí)更是無法進(jìn)行ISP的調(diào)試。為了解決這一迫在眉睫的問題，我們花了4個(gè)月的時(shí)間進(jìn)行嘗試，期間無數(shù)次想放棄，終于在后實(shí)現(xiàn)了客戶需求的設(shè)計(jì)，如下：

出于對系統(tǒng)安全性的保護(hù)，Jetson出廠時(shí)，內(nèi)核編譯打開了驅(qū)動簽名選項(xiàng)，如果新開發(fā)的驅(qū)動簽名證書不匹配，則驅(qū)動ko文件無法加載。但是一般用戶無法拿到NVIDIA編譯出廠鏡像時(shí)的簽名證書，無法解決ko簽名問題。如果需要使用新的sensor模組，則需要重新編譯內(nèi)核、生成全系統(tǒng)鏡像、燒錄系統(tǒng)，工作量相當(dāng)巨大。

失敗與成功，只是一步之遙，在無數(shù)次即將放棄的掙扎下，后得以實(shí)現(xiàn)，并且在FPGA上實(shí)現(xiàn)了完整的ISP，有效地降低了整體Pipeline的延時(shí)，解決了客戶的問題。我們認(rèn)為該方案還是有一定的價(jià)值，因?yàn)橛行Т蛲薔VIDIA  AGX/Jestson套件的接入選項(xiàng)，以至于發(fā)公眾號（FPGA模擬MIPI相機(jī)，成功接入NVIDIA AGX開發(fā)者套件）的第二天，NVIDIA的人就上門了，洽談是否有機(jī)會合入NVIDIA生態(tài)，這也將是我們2024努力的方向之一。

<3>FPGA圖像類產(chǎn)品

1）背水一戰(zhàn)，墨水屏TCON研發(fā)

沒有任何投資，看不到彼岸在哪里，但堅(jiān)持了1年，我們終于在墨水屏TCON的設(shè)計(jì)上，小有所成。目前我們基于廣州奧翼設(shè)計(jì)的墨水屏TCON，已經(jīng)接入了客戶的平板方案；同時(shí)，更多的第三方客戶，正在對接中。

不清楚該方案是否能在短期內(nèi)量產(chǎn)，但我們解決了國產(chǎn)墨水屏TCON的問題，助力客戶盡快落地，我們已經(jīng)付出了大的努力。希望國產(chǎn)墨水屏能夠雄起，能用墨水屏可以改變我們的生活。

劇透：

我們即將推出基于RK的墨水屏開發(fā)套件，用戶當(dāng)作正常的顯示屏（MIPI接口）驅(qū)動輸出即可，奧唯思將大程度支持客戶與工程師實(shí)現(xiàn)量產(chǎn)。

2）繼續(xù)努力，堅(jiān)定定FPGA圖像設(shè)計(jì)……

2023.12，隨著積累及研發(fā)投入的增加，我們不得不擴(kuò)大了1倍的人力以及辦公面積，以更好地支撐客戶的需求及我們的發(fā)展。我們將繼續(xù)在以下板塊發(fā)光發(fā)熱，希望能幫助到更多的同行，也得以落地我們繼續(xù)的理由：

• FPGA/攝像頭開發(fā)板推廣

• FPGA圖像方案定制

• 墨水屏TCON產(chǎn)品研發(fā)

更多Idea，等你來談