致力于亞太地區(qū)市場的國際領(lǐng)先半導(dǎo)體元器件分銷商---大聯(lián)大控股宣布,其旗下世平推出基于耐能(Kneron)KL630系列芯片的AI相機方案。
圖示1-大聯(lián)大世平基于耐能Kneron產(chǎn)品的AI相機方案的展示板圖
AI技術(shù)的不斷成熟讓AI相機的應(yīng)用得到了快速發(fā)展。當(dāng)下,雖然AI相機的應(yīng)用逐漸從安防監(jiān)控擴展到智能家居、醫(yī)療、物流、無人駕駛等應(yīng)用中,為人們提供更便捷、高效、安全的生活體驗。但在攝像機和AI相機的開發(fā)過程中,仍有算法優(yōu)化效率慢、視頻形成質(zhì)量低、數(shù)據(jù)響應(yīng)延遲等諸多問題。為此,大聯(lián)大世平基于Kneron KL630系列芯片推出了AI相機方案。
圖示2-大聯(lián)大世平基于耐能Kneron產(chǎn)品的AI相機方案的場景應(yīng)用圖
本方案所采用的Kneron KL630系列是專為各種專業(yè)和消費IP攝像機設(shè)計的新一代SoC,包含了KLM5301S3、KLM550S3、KLM5502S3等產(chǎn)品,可廣泛用于安防、家用以及其他AI相機的設(shè)計與制造。
KL630系列采用TSMC 28nm先進(jìn)制造工藝,支持快速開發(fā)高質(zhì)量和多鏡頭相機應(yīng)用程序,提供多達(dá)4通道視頻輸入、獨立的高級多ISP管道(包括多曝光高動態(tài)范圍融合)以及專門的視頻質(zhì)量增強功能,適用于多個寬-角度鏡頭和傳感器,加上片上去扭曲、拼接和混合,所有這些都用于高質(zhì)量的實時全景攝像機視頻處理。其中還內(nèi)嵌Kneron第三代神經(jīng)網(wǎng)絡(luò)架構(gòu)內(nèi)核,能及時反應(yīng)并分辨特定物件,降低誤判率。
圖示3-大聯(lián)大世平基于耐能Kneron產(chǎn)品的AI相機方案的方塊圖
Kneron的可重構(gòu)NPU,使本方案支持同時運行CNN和Transformer網(wǎng)絡(luò),既可做,也可運行語義分析,且運算能效優(yōu)異。與僅面向特定應(yīng)用的普通AI模型不同,Kneron的可重構(gòu)人工神經(jīng)網(wǎng)絡(luò)(RANN)技術(shù)更加靈活,可滿足不同應(yīng)用需求并適應(yīng)各種計算體系架構(gòu)。并且搭載輕量級圖像識別算法,可輕松實現(xiàn)人臉識別、身體與手勢識別、物體與場景識別等。不僅如此,第五代ISP技術(shù)可以記錄具有細(xì)節(jié)感知、真實色調(diào)層次和更低噪聲的圖像和視頻。在系統(tǒng)中搭載的智能HEVC編碼器能顯著減少無用的數(shù)據(jù),并在不中斷網(wǎng)絡(luò)帶寬的情況下保持高質(zhì)量視頻。不僅如此,支持180°/360°多通道魚眼去扭曲引擎,結(jié)合了高性能硬件加速魚眼去扭曲器,允許實時去扭曲過程以顯著節(jié)省CPU負(fù)載,并靈活支持各種魚眼的幾何校正/廣角鏡頭提供業(yè)界領(lǐng)先的全景視頻形成質(zhì)量。此外,該方案同步提供AP函數(shù),方便客戶快速上手,另外根據(jù)影像的位置可以進(jìn)行不同的配置調(diào)整。
通過這些優(yōu)勢,本方案能夠為終端用戶提供更高性能、低功耗以及高性價比特點,以卓越成像品質(zhì)賦能AI相機應(yīng)用。
核心技術(shù)優(yōu)勢:
- 可重構(gòu)NPU;
- 影像辨別軟件;
- 第五代ISP可以記錄具有可感知細(xì)節(jié)、真實色調(diào)層次和更低噪聲的圖像和視頻;
- 智能HEVC編碼器盡可能顯著減少無用或不重要的數(shù)據(jù),并在不中斷網(wǎng)絡(luò)帶寬的情況下保持高質(zhì)量的視頻;
- 魚眼引擎去扭曲、拼接、混合;
- 智能視頻分析;
- 音頻增強和智能;
- 高效能的應(yīng)用工具PQ Tool跟Fisheye Correction Tool。
方案規(guī)格:
- KL630系列之AI相機KLR5S3 Series(Car DVR)、KLI5S3 Series(Industrial Cam)。