手機(jī)版 | 網(wǎng)站導(dǎo)航
觀察家網(wǎng) 財(cái)經(jīng) >

君正芯片T40正式起航智能視覺(jué)物聯(lián)網(wǎng)新征途

財(cái)訊網(wǎng) | 2021-08-10 15:14:31

智能視覺(jué)物聯(lián)網(wǎng)(SVIoT),興起正當(dāng)時(shí)

行業(yè)無(wú)舊貌,萬(wàn)象有新意。對(duì)于任一TO B、TO C產(chǎn)業(yè)而言,「聯(lián)」無(wú)界;「智」未來(lái),是其終局。而在此進(jìn)程中,技術(shù)不斷在演進(jìn)與突破。之于當(dāng)下,萬(wàn)物互聯(lián)成為常態(tài),而智能視覺(jué)物聯(lián)網(wǎng)(Smart Vision for the Internet of Things)則是新未來(lái)。

智能視覺(jué)物聯(lián)網(wǎng)是物聯(lián)網(wǎng)的一次「再升級(jí)」,利用各類圖像傳感器,包括監(jiān)控?cái)z像機(jī)、手機(jī)、數(shù)碼相機(jī),獲取人、車、物圖像或視頻,采用圖像視頻模式識(shí)別技術(shù)對(duì)視覺(jué)信息進(jìn)行處理, 提取視覺(jué)環(huán)境中人、車、物視覺(jué)標(biāo)簽,并通過(guò)網(wǎng)絡(luò)傳輸與視覺(jué)標(biāo)簽應(yīng)用系統(tǒng)連接,經(jīng)過(guò)加工與分析,讓這些數(shù)據(jù)進(jìn)一步為生活帶來(lái)便利;并且通過(guò)技術(shù)進(jìn)步,讓視覺(jué)技術(shù)進(jìn)入普通人家庭與生活,解決人們?nèi)粘I钪星猩淼膯?wèn)題。

這是全新賽道,與傳統(tǒng)IoT/AIoT有所異同,都屬智能硬件陣營(yíng),但SVIoT聚焦視覺(jué),不像后兩者的泛在聯(lián)接。與視頻編解碼,AI加速,算法分析,多傳感器融合,互聯(lián)網(wǎng),大數(shù)據(jù),云計(jì)算等技術(shù)融合后,SVIoT呈現(xiàn)的視界,前所未見(jiàn)。

新賽道,必有先入者,也有后來(lái)者。君正是最早一家全身心地聚焦SVIoT賽道,提供從芯片,到AI算力,到開(kāi)發(fā)臺(tái),再到算法整合一體化解決方案的芯片公司,且在這個(gè)賽道爭(zhēng)先取得大量訂單。

或許,SVIoT的「芯」征,誰(shuí)先跑幾步,將來(lái)會(huì)領(lǐng)先市場(chǎng)很多步。

SVIoT的落地與興起離不開(kāi)高能,高可靠的芯片方案支撐。

SVIoT芯片不僅需要傳統(tǒng)攝像機(jī)相關(guān)的技術(shù)要素(如成像技術(shù),視頻壓縮技術(shù)等),同時(shí)需要具備支持聲、光、熱、電、力學(xué)、化學(xué)、生物、位置等多模數(shù)據(jù)融合處理的強(qiáng)大算力,更需要能走入千家萬(wàn)戶的成本控制能力。然而,市面上此類功能「強(qiáng)芯」鳳毛菱角,尤其部分高端芯片受地緣政治影響出現(xiàn)「芯慌」,市面上更是缺乏替代者,如何讓SVIoT發(fā)展有“芯”可依,成了行業(yè)所期。

聚焦視覺(jué)+AI賽道,T40為SVIoT而生

與傳統(tǒng)IoT芯片不同,T40芯片更具象化,其以視覺(jué)為核心,兼容處理多種聲、光、電感知信息,集ISP+AI+Video+算法于一體,采用XBurst2雙核CPU,支持多種感知信號(hào)的集中接入及處理。

T40芯片支持接入CMOS/YUV/TOF/BT1120等光學(xué)信號(hào)、codec/aMIC/dMIC/I2S等聲學(xué)信號(hào)、THTB/MEMS/9-axis/LiDAR/Radar等傳感器信號(hào)等;同步支持多種信號(hào)輸出方式,如RMII/WiFi/MCU-WiFi/4G/BT/Sub-x等網(wǎng)絡(luò)傳輸,TFT/MIPI-DSI/SLCD/BT1120等顯示輸出系統(tǒng)以及I/O擴(kuò)展口輸出等。

在視覺(jué)應(yīng)用中,目前大部分方案只支持視頻處理。而隨著市場(chǎng)對(duì)感知需求從零散稀疏走向無(wú)處不在;從后知后覺(jué)走向先人一步;從輔助系統(tǒng)走向生產(chǎn)系統(tǒng);從單一感知走向多維融合;從事倍功半走向效能增倍;從各自為政走向有效協(xié)同。如此多智能需求,感知是第一步,也是最為關(guān)鍵一步。所以,前端設(shè)備在獲取圖像信息同時(shí),也需要音頻拾取、周圍紅外、感、環(huán)境檢測(cè)等感知信號(hào)接入。不僅如此,感知信號(hào)多樣化接入同時(shí),信號(hào)的輸出與聯(lián)動(dòng),如音頻輸出(雙向?qū)χv)、本地報(bào)警信號(hào)輸出,與交通系統(tǒng)、消防系統(tǒng)、安全防護(hù)系統(tǒng)聯(lián)動(dòng)等。

傳統(tǒng)方案明顯無(wú)法滿足如此眾多智能需求,不過(guò),基于Magik臺(tái)及算法伙伴構(gòu)建的解決方案生態(tài),T40擁有大量成熟的方案基礎(chǔ),便于軟硬件快速成型,利于開(kāi)發(fā)出各種需要處理多維感知信息、高算力的SVIoT設(shè)備,讓前端形成智能核心,進(jìn)而實(shí)現(xiàn)云—邊—端感知組網(wǎng)。

全息全能的「馭光術(shù)」

視界即世界!

圍繞視覺(jué)應(yīng)用全天候和全場(chǎng)景需求,T40芯片采用君正第三代ISP圖像處理技術(shù),對(duì)圖像進(jìn)行光源矯正、膚色還原、3D降噪去拖影、銳化提升、ADR自適應(yīng)、全局通透增強(qiáng)、WDR/HDR、色噪降噪、強(qiáng)光抑制、雙目合成等應(yīng)用;支持最高4K(2169P)超高清視頻編碼能力,同時(shí)兼容H.264、H.265等多種編解碼壓縮方式,實(shí)現(xiàn)視頻流的高效壓縮,同等畫(huà)質(zhì)、幀率條件下,帶寬可降低35%~85%,大大節(jié)約存儲(chǔ)空間的占用率,進(jìn)而降低整體方案的硬件成本。

真正考驗(yàn)一款芯片能是否優(yōu)異,背光環(huán)境、低照度全彩環(huán)境、星光級(jí)夜視圖像處理能力最能體現(xiàn)出芯片的處理效果。實(shí)際上,T40芯片在這三個(gè)場(chǎng)景中都有專業(yè)級(jí)的表現(xiàn)。以背光環(huán)境為例驗(yàn)證其寬動(dòng)態(tài)效果,關(guān)閉搭載T40芯片攝像機(jī)的寬動(dòng)態(tài)功能,畫(huà)面上的強(qiáng)光場(chǎng)景及室內(nèi)背光場(chǎng)景均無(wú)法清晰展示畫(huà)面細(xì)節(jié);而當(dāng)開(kāi)啟寬動(dòng)態(tài)功能后,在T40芯片ISP的多幀融合下,畫(huà)面強(qiáng)光部分的亮度得到了良好抑制,畫(huà)面偏暗部分亮度也得到了良好增強(qiáng),使得前后景都清晰可辨。

在低照度全彩成像能力方面,T40芯片也有不俗表現(xiàn)。相同低照度場(chǎng)景下,搭載T40芯片方案的低照度全彩圖像畫(huà)面干凈清晰,圖像色彩細(xì)節(jié)不丟失;而搭載其他芯片方案的攝像機(jī)圖像噪聲大、色彩丟失嚴(yán)重,且畫(huà)面銳度差,無(wú)層次感。兩相比較,T40芯片方案低照度全彩成像效果凸顯。

而在黑白夜視圖像處理能力上,基于T40芯片處理實(shí)現(xiàn)的畫(huà)面,較一般芯片方案的夜視效果干凈、無(wú)噪聲,且層次感表現(xiàn)明顯。

 

 

高算力、全場(chǎng)景、多算法的AI臺(tái)

T40芯片基于AI-Engine引擎,擁有最大8Tops算力,支持4K+AI、1080P+AI、雙攝+AI、顯示+AI等多種智能視覺(jué)物聯(lián)網(wǎng)方案;需要說(shuō)明的是,疊加AI運(yùn)算情況下,T40芯片仍能保持良好的低功耗效果,包含DDR在內(nèi)最大功耗不會(huì)超過(guò)1.2W,芯片溫度也能穩(wěn)定在40℃左右,其中AI引擎的推理功耗小于500mW,最低能耗比達(dá)到了震撼的0.05W/T級(jí)別,確保系統(tǒng)運(yùn)行的穩(wěn)定可靠。另外低功耗對(duì)于產(chǎn)品的小型化,電池化不言而喻。

此外,Magik開(kāi)發(fā)臺(tái)集模型訓(xùn)練、優(yōu)化轉(zhuǎn)換、部署推理于一體,并提供模型檢查器、調(diào)優(yōu)器、能分析器等工具;廣泛支持各類神經(jīng)網(wǎng)絡(luò)加速,如CNN/RNN/GCN等,也支持傳統(tǒng)CV算法和面運(yùn)算的加速;支持int16/in8/int4/in2混合量化,算力利用率可超過(guò)70%;而512bit SIMD向量加速指令集,能讓算法運(yùn)算更靈活,配合協(xié)處理器單元,還能對(duì)算法進(jìn)行前后處理優(yōu)化;并且支持pytorch/tensorflow/mxnet/caffe/onnx等主流框架,便于開(kāi)展量化感知訓(xùn)練(QAT)和后量化AI應(yīng)用。

與此同時(shí),T40芯片支持導(dǎo)入眾多算法廠家的賦能方案,支持車輛識(shí)別、車牌識(shí)別、行為檢測(cè)、文字識(shí)別、周界防范、物品檢測(cè)、移動(dòng)偵測(cè)等人、車、物及行為的識(shí)別與分析功能;搭配原廠提供的各種完整方案、參考代碼、第三方算法以及云臺(tái)資源,還極大簡(jiǎn)化了低功耗攝像機(jī)方案、槍球聯(lián)動(dòng)方案、VSLAM方案、人臉面板方案、視頻會(huì)議方案等的開(kāi)發(fā)流程,并降低研發(fā)成本,加速產(chǎn)品上市?;赥40芯片方案,在車牌識(shí)別驗(yàn)證中發(fā)現(xiàn),算法能快速對(duì)車輛及其車牌進(jìn)行鎖定,即便拍攝角度大幅度偏離正常范圍,T40芯片也能精準(zhǔn)檢測(cè)及識(shí)別。

在人和動(dòng)物檢測(cè)驗(yàn)證中,T40芯片+AI算法加持下,攝像機(jī)能輕松檢測(cè)人、人臉、動(dòng)物、姿態(tài)、行為,跟蹤鎖定也穩(wěn)定、可靠,分析精準(zhǔn)。

互惠共建SVIoT廣闊生態(tài)

更重要的是,在全球芯片大缺貨背景下,君正表示,T40芯片貨源充足,在當(dāng)前可落地的端級(jí)視覺(jué)AI芯片產(chǎn)品短缺的情況下,T40芯片已經(jīng)成為極佳的供應(yīng)方案,目前已大批量導(dǎo)入多家客戶并獲得應(yīng)用。

錘煉芯片,絕非朝夕之功,都在歲月里。君正憑借著芯片能,AI算力,開(kāi)發(fā)環(huán)境,超低功耗,成熟方案以及供應(yīng)安全等諸多優(yōu)勢(shì),T40未來(lái)將有望成為SVIoT新賽道上落地能力極強(qiáng)的芯片臺(tái),但,如果要?jiǎng)?chuàng)造SVIoT市場(chǎng)指數(shù)級(jí)的大繁榮,非一己之力可承擔(dān)。

如果前面是一片大海,君正希望與伙伴們共舉創(chuàng)新大旗,攜手出航,乘風(fēng)破浪,這是一場(chǎng)有著光榮與夢(mèng)想的商業(yè)科技之旅。

免責(zé)聲明:市場(chǎng)有風(fēng)險(xiǎn),選擇需謹(jǐn)慎!此文僅供參考,不作買賣依據(jù)。

  • 標(biāo)簽:中國(guó)觀察家網(wǎng) 中國(guó)綜合門戶網(wǎng),商業(yè)門戶網(wǎng)站,新媒體,網(wǎng)絡(luò)媒體,新聞,財(cái)經(jīng),體育,娛樂(lè),時(shí)尚,汽車,房產(chǎn),科技,圖片,論壇,微博,博客,視頻,電影,電視劇

相關(guān)推薦

媒體焦點(diǎn)