智能視覺(jué)物聯(lián)網(wǎng)(SVIoT)，興起正當(dāng)時(shí)
行業(yè)無(wú)舊貌，萬(wàn)象有新意。對(duì)于任一TO B、TO C產(chǎn)業(yè)而言，「聯(lián)」無(wú)界;「智」未來(lái)，是其終局。而在此進(jìn)程中，技術(shù)不斷在演進(jìn)與突破。之于當(dāng)下，萬(wàn)物互聯(lián)成為常態(tài)，而智能視覺(jué)物聯(lián)網(wǎng)(Smart Vision for the Internet of Things)則是新未來(lái)。
智能視覺(jué)物聯(lián)網(wǎng)是物聯(lián)網(wǎng)的一次「再升級(jí)」，利用各類圖像傳感器，包括監(jiān)控?cái)z像機(jī)、手機(jī)、數(shù)碼相機(jī)，獲取人、車、物圖像或視頻，采用圖像視頻模式識(shí)別技術(shù)對(duì)視覺(jué)信息進(jìn)行處理， 提取視覺(jué)環(huán)境中人、車、物視覺(jué)標(biāo)簽，并通過(guò)網(wǎng)絡(luò)傳輸與視覺(jué)標(biāo)簽應(yīng)用系統(tǒng)連接，經(jīng)過(guò)加工與分析，讓這些數(shù)據(jù)進(jìn)一步為生活帶來(lái)便利;并且通過(guò)技術(shù)進(jìn)步，讓視覺(jué)技術(shù)進(jìn)入普通人家庭與生活，解決人們?nèi)粘Ｉ钪星猩淼膯?wèn)題。
這是全新賽道，與傳統(tǒng)IoT/AIoT有所異同，都屬智能硬件陣營(yíng)，但SVIoT聚焦視覺(jué)，不像后兩者的泛在聯(lián)接。與視頻編解碼，AI加速，算法分析，多傳感器融合，互聯(lián)網(wǎng)，大數(shù)據(jù)，云計(jì)算等技術(shù)融合后，SVIoT呈現(xiàn)的視界，前所未見(jiàn)。
新賽道，必有先入者，也有后來(lái)者。君正是最早一家全身心地聚焦SVIoT賽道，提供從芯片，到AI算力，到開(kāi)發(fā)平臺(tái)，再到算法整合一體化解決方案的芯片公司，且在這個(gè)賽道爭(zhēng)先取得大量訂單。
或許，SVIoT的「芯」征，誰(shuí)先跑幾步，將來(lái)會(huì)領(lǐng)先市場(chǎng)很多步。
SVIoT的落地與興起離不開(kāi)高性能，高可靠性的芯片方案支撐。
SVIoT芯片不僅需要傳統(tǒng)攝像機(jī)相關(guān)的技術(shù)要素(如成像技術(shù)，視頻壓縮技術(shù)等)，同時(shí)需要具備支持聲、光、熱、電、力學(xué)、化學(xué)、生物、位置等多模數(shù)據(jù)融合處理的強(qiáng)大算力，更需要能走入千家萬(wàn)戶的成本控制能力。然而，市面上此類功能「強(qiáng)芯」鳳毛菱角，尤其部分高端芯片受地緣政治影響出現(xiàn)「芯慌」，市面上更是缺乏替代者，如何讓SVIoT發(fā)展有“芯”可依，成了行業(yè)所期。
聚焦視覺(jué)+AI賽道，T40為SVIoT而生
與傳統(tǒng)IoT芯片不同，T40芯片更具象化，其以視覺(jué)為核心，兼容處理多種聲、光、電感知信息，集ISP+AI+Video+算法于一體，采用XBurst2雙核CPU，支持多種感知信號(hào)的集中接入及處理。
T40芯片支持接入CMOS/YUV/TOF/BT1120等光學(xué)信號(hào)、codec/aMIC/dMIC/I2S等聲學(xué)信號(hào)、THTB/MEMS/9-axis/LiDAR/Radar等傳感器信號(hào)等;同步支持多種信號(hào)輸出方式，如RMII/WiFi/MCU-WiFi/4G/BT/Sub-x等網(wǎng)絡(luò)傳輸，TFT/MIPI-DSI/SLCD/BT1120等顯示輸出系統(tǒng)以及I/O擴(kuò)展口輸出等。
在視覺(jué)應(yīng)用中，目前大部分方案只支持視頻處理。而隨著市場(chǎng)對(duì)感知需求從零散稀疏走向無(wú)處不在;從后知后覺(jué)走向先人一步;從輔助系統(tǒng)走向生產(chǎn)系統(tǒng);從單一感知走向多維融合;從事倍功半走向效能增倍;從各自為政走向有效協(xié)同。如此多智能需求，感知是第一步，也是最為關(guān)鍵一步。所以，前端設(shè)備在獲取圖像信息同時(shí)，也需要音頻拾取、周圍紅外、煙感、環(huán)境檢測(cè)等感知信號(hào)接入。不僅如此，感知信號(hào)多樣化接入同時(shí)，信號(hào)的輸出與聯(lián)動(dòng)，如音頻輸出(雙向?qū)χv)、本地報(bào)警信號(hào)輸出，與交通系統(tǒng)、消防系統(tǒng)、安全防護(hù)系統(tǒng)聯(lián)動(dòng)等。
傳統(tǒng)方案明顯無(wú)法滿足如此眾多智能需求，不過(guò)，基于Magik平臺(tái)及算法伙伴構(gòu)建的解決方案生態(tài)，T40擁有大量成熟的方案基礎(chǔ)，便于軟硬件快速成型，利于開(kāi)發(fā)出各種需要處理多維感知信息、高算力的SVIoT設(shè)備，讓前端形成智能核心，進(jìn)而實(shí)現(xiàn)云—邊—端感知組網(wǎng)。
全息全能的「馭光術(shù)」
視界即世界!
圍繞視覺(jué)應(yīng)用全天候和全場(chǎng)景需求，T40芯片采用君正第三代ISP圖像處理技術(shù)，對(duì)圖像進(jìn)行光源矯正、膚色還原、3D降噪去拖影、銳化提升、ADR自適應(yīng)、全局通透增強(qiáng)、WDR/HDR、色噪降噪、強(qiáng)光抑制、雙目合成等應(yīng)用;支持最高4K(2169P)超高清視頻編碼能力，同時(shí)兼容H.264、H.265等多種編解碼壓縮方式，實(shí)現(xiàn)視頻流的高效壓縮，同等畫(huà)質(zhì)、幀率條件下，帶寬可降低35%~85%，大大節(jié)約存儲(chǔ)空間的占用率，進(jìn)而降低整體方案的硬件成本。
真正考驗(yàn)一款芯片性能是否優(yōu)異，背光環(huán)境、低照度全彩環(huán)境、星光級(jí)夜視圖像處理能力最能體現(xiàn)出芯片的處理效果。實(shí)際上，T40芯片在這三個(gè)場(chǎng)景中都有專業(yè)級(jí)的表現(xiàn)。以背光環(huán)境為例驗(yàn)證其寬動(dòng)態(tài)效果，關(guān)閉搭載T40芯片攝像機(jī)的寬動(dòng)態(tài)功能，畫(huà)面上的強(qiáng)光場(chǎng)景及室內(nèi)背光場(chǎng)景均無(wú)法清晰展示畫(huà)面細(xì)節(jié);而當(dāng)開(kāi)啟寬動(dòng)態(tài)功能后，在T40芯片ISP的多幀融合下，畫(huà)面強(qiáng)光部分的亮度得到了良好抑制，畫(huà)面偏暗部分亮度也得到了良好增強(qiáng)，使得前后景都清晰可辨。
在低照度全彩成像能力方面，T40芯片也有不俗表現(xiàn)。相同低照度場(chǎng)景下，搭載T40芯片方案的低照度全彩圖像畫(huà)面干凈清晰，圖像色彩細(xì)節(jié)不丟失;而搭載其他芯片方案的攝像機(jī)圖像噪聲大、色彩丟失嚴(yán)重，且畫(huà)面銳度差，無(wú)層次感。兩相比較，T40芯片方案低照度全彩成像效果凸顯。
而在黑白夜視圖像處理能力上，基于T40芯片處理實(shí)現(xiàn)的畫(huà)面，較一般芯片方案的夜視效果干凈、無(wú)噪聲，且層次感表現(xiàn)明顯。
高算力、全場(chǎng)景、多算法的AI平臺(tái)
T40芯片基于AI-Engine引擎，擁有最大8Tops算力，支持4K+AI、1080P+AI、雙攝+AI、顯示+AI等多種智能視覺(jué)物聯(lián)網(wǎng)方案;需要說(shuō)明的是，疊加AI運(yùn)算情況下，T40芯片仍能保持良好的低功耗效果，包含DDR在內(nèi)最大功耗不會(huì)超過(guò)1.2W，芯片溫度也能穩(wěn)定在40℃左右，其中AI引擎的推理功耗小于500mW，最低能耗比達(dá)到了震撼的0.05W/T級(jí)別，確保系統(tǒng)運(yùn)行的穩(wěn)定可靠性。另外低功耗對(duì)于產(chǎn)品的小型化，電池化不言而喻。
此外，Magik開(kāi)發(fā)平臺(tái)集模型訓(xùn)練、優(yōu)化轉(zhuǎn)換、部署推理于一體，并提供模型檢查器、調(diào)優(yōu)器、性能分析器等工具;廣泛支持各類神經(jīng)網(wǎng)絡(luò)加速，如CNN/RNN/GCN等，也支持傳統(tǒng)CV算法和平面運(yùn)算的加速;支持int16/in8/int4/in2混合量化，算力利用率可超過(guò)70%;而512bit SIMD向量加速指令集，能讓算法運(yùn)算更靈活，配合協(xié)處理器單元，還能對(duì)算法進(jìn)行前后處理優(yōu)化;并且支持pytorch/tensorflow/mxnet/caffe/onnx等主流框架，便于開(kāi)展量化感知訓(xùn)練(QAT)和后量化AI應(yīng)用。
與此同時(shí)，T40芯片支持導(dǎo)入眾多算法廠家的賦能方案，支持車輛識(shí)別、車牌識(shí)別、行為檢測(cè)、文字識(shí)別、周界防范、物品檢測(cè)、移動(dòng)偵測(cè)等人、車、物及行為的識(shí)別與分析功能;搭配原廠提供的各種完整方案、參考代碼、第三方算法以及云平臺(tái)資源，還極大簡(jiǎn)化了低功耗攝像機(jī)方案、槍球聯(lián)動(dòng)方案、VSLAM方案、人臉面板方案、視頻會(huì)議方案等的開(kāi)發(fā)流程，并降低研發(fā)成本，加速產(chǎn)品上市?；赥40芯片方案，在車牌識(shí)別驗(yàn)證中發(fā)現(xiàn)，算法能快速對(duì)車輛及其車牌進(jìn)行鎖定，即便拍攝角度大幅度偏離正常范圍，T40芯片也能精準(zhǔn)檢測(cè)及識(shí)別。
在人和動(dòng)物檢測(cè)驗(yàn)證中，T40芯片+AI算法加持下，攝像機(jī)能輕松檢測(cè)人、人臉、動(dòng)物、姿態(tài)、行為，跟蹤鎖定也穩(wěn)定、可靠，分析精準(zhǔn)。
互惠共建SVIoT廣闊生態(tài)
更重要的是，在全球芯片大缺貨背景下，君正表示，T40芯片貨源充足，在當(dāng)前可落地的端級(jí)視覺(jué)AI芯片產(chǎn)品短缺的情況下，T40芯片已經(jīng)成為極佳的供應(yīng)方案，目前已大批量導(dǎo)入多家客戶并獲得應(yīng)用。
錘煉芯片，絕非朝夕之功，都在歲月里。君正憑借著芯片性能，AI算力，開(kāi)發(fā)環(huán)境，超低功耗，成熟方案以及供應(yīng)安全等諸多優(yōu)勢(shì)，T40未來(lái)將有望成為SVIoT新賽道上落地能力極強(qiáng)的芯片平臺(tái)，但，如果要?jiǎng)?chuàng)造SVIoT市場(chǎng)指數(shù)級(jí)的大繁榮，非一己之力可承擔(dān)。
如果前面是一片大海，君正希望與伙伴們共舉創(chuàng)新大旗，攜手出航，乘風(fēng)破浪，這是一場(chǎng)有著光榮與夢(mèng)想的商業(yè)科技之旅。
免責(zé)聲明：市場(chǎng)有風(fēng)險(xiǎn)，選擇需謹(jǐn)慎！此文僅供參考，不作買賣依據(jù)。
