智能視覺物聯(lián)網(wǎng)(SVIoT)，興起正當(dāng)時(shí)
行業(yè)無舊貌，萬象有新意。對于任一TO B、TO C產(chǎn)業(yè)而言，「聯(lián)」無界;「智」未來，是其終局。而在此進(jìn)程中，技術(shù)不斷在演進(jìn)與突破。之于當(dāng)下，萬物互聯(lián)成為常態(tài)，而智能視覺物聯(lián)網(wǎng)(Smart Vision for the Internet of Things)則是新未來。
智能視覺物聯(lián)網(wǎng)是物聯(lián)網(wǎng)的一次「再升級」，利用各類圖像傳感器，包括監(jiān)控?cái)z像機(jī)、手機(jī)、數(shù)碼相機(jī)，獲取人、車、物圖像或視頻，采用圖像視頻模式識別技術(shù)對視覺信息進(jìn)行處理， 提取視覺環(huán)境中人、車、物視覺標(biāo)簽，并通過網(wǎng)絡(luò)傳輸與視覺標(biāo)簽應(yīng)用系統(tǒng)連接，經(jīng)過加工與分析，讓這些數(shù)據(jù)進(jìn)一步為生活帶來便利;并且通過技術(shù)進(jìn)步，讓視覺技術(shù)進(jìn)入普通人家庭與生活，解決人們?nèi)粘Ｉ钪星猩淼膯栴}。
這是全新賽道，與傳統(tǒng)IoT/AIoT有所異同，都屬智能硬件陣營，但SVIoT聚焦視覺，不像后兩者的泛在聯(lián)接。與視頻編解碼，AI加速，算法分析，多傳感器融合，互聯(lián)網(wǎng)，大數(shù)據(jù)，云計(jì)算等技術(shù)融合后，SVIoT呈現(xiàn)的視界，前所未見。
新賽道，必有先入者，也有后來者。君正是最早一家全身心地聚焦SVIoT賽道，提供從芯片，到AI算力，到開發(fā)平臺，再到算法整合一體化解決方案的芯片公司，且在這個(gè)賽道爭先取得大量訂單。
或許，SVIoT的「芯」征，誰先跑幾步，將來會領(lǐng)先市場很多步。
SVIoT的落地與興起離不開高性能，高可靠性的芯片方案支撐。
SVIoT芯片不僅需要傳統(tǒng)攝像機(jī)相關(guān)的技術(shù)要素(如成像技術(shù)，視頻壓縮技術(shù)等)，同時(shí)需要具備支持聲、光、熱、電、力學(xué)、化學(xué)、生物、位置等多模數(shù)據(jù)融合處理的強(qiáng)大算力，更需要能走入千家萬戶的成本控制能力。然而，市面上此類功能「強(qiáng)芯」鳳毛菱角，尤其部分高端芯片受地緣政治影響出現(xiàn)「芯慌」，市面上更是缺乏替代者，如何讓SVIoT發(fā)展有“芯”可依，成了行業(yè)所期。
聚焦視覺+AI賽道，T40為SVIoT而生
與傳統(tǒng)IoT芯片不同，T40芯片更具象化，其以視覺為核心，兼容處理多種聲、光、電感知信息，集ISP+AI+Video+算法于一體，采用XBurst2雙核CPU，支持多種感知信號的集中接入及處理。
T40芯片支持接入CMOS/YUV/TOF/BT1120等光學(xué)信號、codec/aMIC/dMIC/I2S等聲學(xué)信號、THTB/MEMS/9-axis/LiDAR/Radar等傳感器信號等;同步支持多種信號輸出方式，如RMII/WiFi/MCU-WiFi/4G/BT/Sub-x等網(wǎng)絡(luò)傳輸，TFT/MIPI-DSI/SLCD/BT1120等顯示輸出系統(tǒng)以及I/O擴(kuò)展口輸出等。
在視覺應(yīng)用中，目前大部分方案只支持視頻處理。而隨著市場對感知需求從零散稀疏走向無處不在;從后知后覺走向先人一步;從輔助系統(tǒng)走向生產(chǎn)系統(tǒng);從單一感知走向多維融合;從事倍功半走向效能增倍;從各自為政走向有效協(xié)同。如此多智能需求，感知是第一步，也是最為關(guān)鍵一步。所以，前端設(shè)備在獲取圖像信息同時(shí)，也需要音頻拾取、周圍紅外、煙感、環(huán)境檢測等感知信號接入。不僅如此，感知信號多樣化接入同時(shí)，信號的輸出與聯(lián)動，如音頻輸出(雙向?qū)χv)、本地報(bào)警信號輸出，與交通系統(tǒng)、消防系統(tǒng)、安全防護(hù)系統(tǒng)聯(lián)動等。
傳統(tǒng)方案明顯無法滿足如此眾多智能需求，不過，基于Magik平臺及算法伙伴構(gòu)建的解決方案生態(tài)，T40擁有大量成熟的方案基礎(chǔ)，便于軟硬件快速成型，利于開發(fā)出各種需要處理多維感知信息、高算力的SVIoT設(shè)備，讓前端形成智能核心，進(jìn)而實(shí)現(xiàn)云—邊—端感知組網(wǎng)。
全息全能的「馭光術(shù)」
視界即世界!
圍繞視覺應(yīng)用全天候和全場景需求，T40芯片采用君正第三代ISP圖像處理技術(shù)，對圖像進(jìn)行光源矯正、膚色還原、3D降噪去拖影、銳化提升、ADR自適應(yīng)、全局通透增強(qiáng)、WDR/HDR、色噪降噪、強(qiáng)光抑制、雙目合成等應(yīng)用;支持最高4K(2169P)超高清視頻編碼能力，同時(shí)兼容H.264、H.265等多種編解碼壓縮方式，實(shí)現(xiàn)視頻流的高效壓縮，同等畫質(zhì)、幀率條件下，帶寬可降低35%~85%，大大節(jié)約存儲空間的占用率，進(jìn)而降低整體方案的硬件成本。
真正考驗(yàn)一款芯片性能是否優(yōu)異，背光環(huán)境、低照度全彩環(huán)境、星光級夜視圖像處理能力最能體現(xiàn)出芯片的處理效果。實(shí)際上，T40芯片在這三個(gè)場景中都有專業(yè)級的表現(xiàn)。以背光環(huán)境為例驗(yàn)證其寬動態(tài)效果，關(guān)閉搭載T40芯片攝像機(jī)的寬動態(tài)功能，畫面上的強(qiáng)光場景及室內(nèi)背光場景均無法清晰展示畫面細(xì)節(jié);而當(dāng)開啟寬動態(tài)功能后，在T40芯片ISP的多幀融合下，畫面強(qiáng)光部分的亮度得到了良好抑制，畫面偏暗部分亮度也得到了良好增強(qiáng)，使得前后景都清晰可辨。
在低照度全彩成像能力方面，T40芯片也有不俗表現(xiàn)。相同低照度場景下，搭載T40芯片方案的低照度全彩圖像畫面干凈清晰，圖像色彩細(xì)節(jié)不丟失;而搭載其他芯片方案的攝像機(jī)圖像噪聲大、色彩丟失嚴(yán)重，且畫面銳度差，無層次感。兩相比較，T40芯片方案低照度全彩成像效果凸顯。
而在黑白夜視圖像處理能力上，基于T40芯片處理實(shí)現(xiàn)的畫面，較一般芯片方案的夜視效果干凈、無噪聲，且層次感表現(xiàn)明顯。
高算力、全場景、多算法的AI平臺
T40芯片基于AI-Engine引擎，擁有最大8Tops算力，支持4K+AI、1080P+AI、雙攝+AI、顯示+AI等多種智能視覺物聯(lián)網(wǎng)方案;需要說明的是，疊加AI運(yùn)算情況下，T40芯片仍能保持良好的低功耗效果，包含DDR在內(nèi)最大功耗不會超過1.2W，芯片溫度也能穩(wěn)定在40℃左右，其中AI引擎的推理功耗小于500mW，最低能耗比達(dá)到了震撼的0.05W/T級別，確保系統(tǒng)運(yùn)行的穩(wěn)定可靠性。另外低功耗對于產(chǎn)品的小型化，電池化不言而喻。
此外，Magik開發(fā)平臺集模型訓(xùn)練、優(yōu)化轉(zhuǎn)換、部署推理于一體，并提供模型檢查器、調(diào)優(yōu)器、性能分析器等工具;廣泛支持各類神經(jīng)網(wǎng)絡(luò)加速，如CNN/RNN/GCN等，也支持傳統(tǒng)CV算法和平面運(yùn)算的加速;支持int16/in8/int4/in2混合量化，算力利用率可超過70%;而512bit SIMD向量加速指令集，能讓算法運(yùn)算更靈活，配合協(xié)處理器單元，還能對算法進(jìn)行前后處理優(yōu)化;并且支持pytorch/tensorflow/mxnet/caffe/onnx等主流框架，便于開展量化感知訓(xùn)練(QAT)和后量化AI應(yīng)用。
與此同時(shí)，T40芯片支持導(dǎo)入眾多算法廠家的賦能方案，支持車輛識別、車牌識別、行為檢測、文字識別、周界防范、物品檢測、移動偵測等人、車、物及行為的識別與分析功能;搭配原廠提供的各種完整方案、參考代碼、第三方算法以及云平臺資源，還極大簡化了低功耗攝像機(jī)方案、槍球聯(lián)動方案、VSLAM方案、人臉面板方案、視頻會議方案等的開發(fā)流程，并降低研發(fā)成本，加速產(chǎn)品上市?；赥40芯片方案，在車牌識別驗(yàn)證中發(fā)現(xiàn)，算法能快速對車輛及其車牌進(jìn)行鎖定，即便拍攝角度大幅度偏離正常范圍，T40芯片也能精準(zhǔn)檢測及識別。
在人和動物檢測驗(yàn)證中，T40芯片+AI算法加持下，攝像機(jī)能輕松檢測人、人臉、動物、姿態(tài)、行為，跟蹤鎖定也穩(wěn)定、可靠，分析精準(zhǔn)。
互惠共建SVIoT廣闊生態(tài)
更重要的是，在全球芯片大缺貨背景下，君正表示，T40芯片貨源充足，在當(dāng)前可落地的端級視覺AI芯片產(chǎn)品短缺的情況下，T40芯片已經(jīng)成為極佳的供應(yīng)方案，目前已大批量導(dǎo)入多家客戶并獲得應(yīng)用。
錘煉芯片，絕非朝夕之功，都在歲月里。君正憑借著芯片性能，AI算力，開發(fā)環(huán)境，超低功耗，成熟方案以及供應(yīng)安全等諸多優(yōu)勢，T40未來將有望成為SVIoT新賽道上落地能力極強(qiáng)的芯片平臺，但，如果要創(chuàng)造SVIoT市場指數(shù)級的大繁榮，非一己之力可承擔(dān)。
如果前面是一片大海，君正希望與伙伴們共舉創(chuàng)新大旗，攜手出航，乘風(fēng)破浪，這是一場有著光榮與夢想的商業(yè)科技之旅。
免責(zé)聲明：市場有風(fēng)險(xiǎn)，選擇需謹(jǐn)慎！此文僅供參考，不作買賣依據(jù)。
