2023年6月15日，致力于亞太地區(qū)市場(chǎng)的國(guó)際領(lǐng)先半導(dǎo)體元器件分銷(xiāo)商---大聯(lián)大控股宣布，其旗下世平推出基于耐能(Kneron)KL630系列芯片的AI相機(jī)方案。
圖示1-大聯(lián)大世平基于耐能Kneron產(chǎn)品的AI相機(jī)方案的展示板圖
AI技術(shù)的不斷成熟讓AI相機(jī)的應(yīng)用得到了快速發(fā)展。當(dāng)下，雖然AI相機(jī)的應(yīng)用逐漸從安防監(jiān)控?cái)U(kuò)展到智能家居、醫(yī)療、物流、無(wú)人駕駛等應(yīng)用中，為人們提供更便捷、高效、安全的生活體驗(yàn)。但在攝像機(jī)和AI相機(jī)的開(kāi)發(fā)過(guò)程中，仍有算法優(yōu)化效率慢、視頻形成質(zhì)量低、數(shù)據(jù)響應(yīng)延遲等諸多問(wèn)題。為此，大聯(lián)大世平基于Kneron KL630系列芯片推出了AI相機(jī)方案。
圖示2-大聯(lián)大世平基于耐能Kneron產(chǎn)品的AI相機(jī)方案的場(chǎng)景應(yīng)用圖
本方案所采用的Kneron KL630系列是專(zhuān)為各種專(zhuān)業(yè)和消費(fèi)IP攝像機(jī)設(shè)計(jì)的新一代SoC，包含了KLM5301S3、KLM550S3、KLM5502S3等產(chǎn)品，可廣泛用于安防、家用以及其他AI相機(jī)的設(shè)計(jì)與制造。
KL630系列采用TSMC 28nm先進(jìn)制造工藝，支持快速開(kāi)發(fā)高質(zhì)量和多鏡頭相機(jī)應(yīng)用程序，提供多達(dá)4通道視頻輸入、獨(dú)立的高級(jí)多ISP管道(包括多曝光高動(dòng)態(tài)范圍融合)以及專(zhuān)門(mén)的視頻質(zhì)量增強(qiáng)功能，適用于多個(gè)寬-角度鏡頭和傳感器，加上片上去扭曲、拼接和混合，所有這些都用于高質(zhì)量的實(shí)時(shí)全景攝像機(jī)視頻處理。其中還內(nèi)嵌Kneron第三代神經(jīng)網(wǎng)絡(luò)架構(gòu)內(nèi)核，能及時(shí)反應(yīng)并分辨特定物件，降低誤判率。
圖示3-大聯(lián)大世平基于耐能Kneron產(chǎn)品的AI相機(jī)方案的方塊圖
Kneron的可重構(gòu)NPU，使本方案支持同時(shí)運(yùn)行CNN和Transformer網(wǎng)絡(luò)，既可做機(jī)器視覺(jué)，也可運(yùn)行語(yǔ)義分析，且運(yùn)算能效優(yōu)異。與僅面向特定應(yīng)用的普通AI模型不同，Kneron的可重構(gòu)人工神經(jīng)網(wǎng)絡(luò)(RANN)技術(shù)更加靈活，可滿足不同應(yīng)用需求并適應(yīng)各種計(jì)算體系架構(gòu)。并且搭載輕量級(jí)圖像識(shí)別算法，可輕松實(shí)現(xiàn)人臉識(shí)別、身體與手勢(shì)識(shí)別、物體與場(chǎng)景識(shí)別等。不僅如此，第五代ISP技術(shù)可以記錄具有細(xì)節(jié)感知、真實(shí)色調(diào)層次和更低噪聲的圖像和視頻。在系統(tǒng)中搭載的智能HEVC編碼器能顯著減少無(wú)用的數(shù)據(jù)，并在不中斷網(wǎng)絡(luò)帶寬的情況下保持高質(zhì)量視頻。不僅如此，支持180°/360°多通道魚(yú)眼去扭曲引擎，結(jié)合了高性能硬件加速魚(yú)眼去扭曲器，允許實(shí)時(shí)去扭曲過(guò)程以顯著節(jié)省CPU負(fù)載，并靈活支持各種魚(yú)眼的幾何校正/廣角鏡頭提供業(yè)界領(lǐng)先的全景視頻形成質(zhì)量。此外，該方案同步提供AP函數(shù)，方便客戶快速上手，另外根據(jù)影像的位置可以進(jìn)行不同的配置調(diào)整。
通過(guò)這些優(yōu)勢(shì)，本方案能夠?yàn)榻K端用戶提供更高性能、低功耗以及高性?xún)r(jià)比特點(diǎn)，以卓越成像品質(zhì)賦能AI相機(jī)應(yīng)用。
核心技術(shù)優(yōu)勢(shì)：
● 可重構(gòu)NPU;
● 影像辨別軟件;
● 第五代ISP可以記錄具有可感知細(xì)節(jié)、真實(shí)色調(diào)層次和更低噪聲的圖像和視頻;
● 智能HEVC編碼器盡可能顯著減少無(wú)用或不重要的數(shù)據(jù)，并在不中斷網(wǎng)絡(luò)帶寬的情況下保持高質(zhì)量的視頻;
● 魚(yú)眼引擎去扭曲、拼接、混合;
● 智能視頻分析;
● 音頻增強(qiáng)和智能;
● 高效能的應(yīng)用工具PQ Tool跟Fisheye Correction Tool。
方案規(guī)格：
● KL630系列之AI相機(jī)KLR5S3 Series(Car DVR)、KLI5S3 Series(Industrial Cam)。
（大聯(lián)大世平）
