NOVATEK NT98530芯片是新一代的安防產(chǎn)品用的芯片。傳統(tǒng)的安防產(chǎn)品多用于監(jiān)控領(lǐng)域, 如家用的防盜搜證, 老人及小孩的安全監(jiān)視, 也用于警用交通的監(jiān)控, 如路口的監(jiān)視器, 應(yīng)用于電腦的遠(yuǎn)端視訊會(huì)議等等, 各種應(yīng)用已深入生活之中, 新一代的產(chǎn)品加入了AI的功能, 更擴(kuò)大了應(yīng)用的層面, 如防盜可加入人臉辨識(shí), 對(duì)于陌生人可發(fā)出警告, 老人或小孩跌倒意外, 可通知相關(guān)人; 火災(zāi)發(fā)生時(shí), 可通知相關(guān)單位; 交通方面, 可做車牌辨識(shí), 車速檢測(cè), 車流監(jiān)控及ADAS應(yīng)用。商業(yè)方面, 可做人流的大數(shù)據(jù)分析, 分析年齡層對(duì)不同產(chǎn)品的喜好等等, 其它還有AIOT的應(yīng)用, 如手勢(shì)控制開關(guān), 燈光照明等等, 愈來愈豐富。

NT98530整合了四顆ARM Cortex A53核心, 可以擷取8Mp60的影像, 擁有先進(jìn)的AI能力, 運(yùn)算模型為HW-CNN 2.5, 運(yùn)算力為2T, 可分析人臉辨識(shí)。影像有多種輸入界面, 包含MIPI/LVDS/BT656/BT1120等, 輸出界面有YUV/RGB/BT656/LCD Parallel/MIPI-DSI/HDMI/USB及Ethernet. 另外還有Video codec and Audio codec。

影像Sensor是安防監(jiān)控系統(tǒng)的重要組成元件, 好的Sensor決定了清淅度, 及色彩飽合度, 亮度調(diào)整及強(qiáng)光抑制, 因此也衍生出很多的相關(guān)技術(shù), 如畫素合并, WDR, HDR, 3A調(diào)整等等, SmartSens在Sensor領(lǐng)域巳深耕多年, 也有相當(dāng)大的市占率及好評(píng), 在安防監(jiān)控領(lǐng)域, SmartSens強(qiáng)化科技于星光夜視, HDR, 近紅外增益及影像低噪, 都得到很好的效果。

Novatek的IPCam處理器加上SmartSens的Sensor, 經(jīng)優(yōu)化調(diào)整后, 都得到很好的成果。因此, 我們也在NT98530方案上, 整合了一系列的SmartSens Sensor, 如8M的SC850SL, 5M的SC530AI/SC5239, 2M的SC233。特別推薦的是今年主力產(chǎn)品SC850SL, 最大圖像速率可達(dá)8Mp60，可用在車載錄影機(jī)，也可用在網(wǎng)路攝像機(jī)。模組相片如下:

1. 硬件設(shè)計(jì)

1.1 MIPI-CSI sensor

1.2 Storage

1.3 LPDDR4

1.4 LCD

2. Linux 版本及軟體架構(gòu)

2.1 Linux 版本

Linux 4.19

2.2 軟體架構(gòu)

HDAL為硬體裝置抽象層(Hardware Device Abstraction Layer)，用來取代現(xiàn)存軟體架構(gòu)的HAL層，為Novatek所開發(fā)且適用旗下許多芯片，SDK以HDAL為主體，發(fā)展獨(dú)立于不同芯片且共用的API接口，讓芯片能更好地發(fā)揮效能。亦有提供許多自定義接口如ISP、AI、IQ等Vendor API，可供用戶實(shí)現(xiàn)許多功能。

3. 影像顯示設(shè)定步驟

3.1連接EVB和Notebook間的網(wǎng)路線,

3.2設(shè)定Ethernet IPv4的設(shè)定如下,

3.3開完機(jī)后, 在console寫入下列命令

pq_video_rtsp 18 0 2 0 0 6

開機(jī)下這行指令，可以開啟imx415+os02k10 sensor

3.4執(zhí)行VLC.exe

3.5 (SC850SL)輸入網(wǎng)路串流位置: rtsp://192.168.0.3/stream0

后可看到影像#

3.6 (SC2336)輸入網(wǎng)路串流位置: rtsp://192.168.0.3/stream1

后可看到影像#

4. 可提供的文件列表

4.1 NT98530應(yīng)用主板的電路圖

4.2 使用的零件列表

4.3 NT98530應(yīng)用主板的布線圖(Layout file)

4.4 主板的零件位置圖

4.5 主板的布線規(guī)范

4.6 NT98530設(shè)計(jì)的應(yīng)用規(guī)范

4.7 NT98530的datasheet

4.8 SDK for NT98530

?場(chǎng)景應(yīng)用圖

?產(chǎn)品實(shí)體圖

?展示板照片

?方案方塊圖

?核心技術(shù)優(yōu)勢(shì)

(1) 影像監(jiān)控結(jié)合AI人臉辨識(shí), 動(dòng)作更加精確;

(2) 有高, 中, 低系列平臺(tái), 符合市場(chǎng)不同需求;

(3) Sensor+ISP的調(diào)校技術(shù);

(4) 支持多種sensor輸入界面, 包含MIPI-CSI/sub-LVDS /HiSPi/Parallel;

(5) 支持多種影像分辨率上至8Mp60;

(6) 支持多種影像輸出界面, 包含LCD Parallel/MIPI_DSI/HDMI/USB/Ethernet;

?方案規(guī)格

(1) 芯片核心是Qual Cortex-A53;

(2) AI運(yùn)算力是2T;

(3) 電源輸入是12V/1A;

(4) 系統(tǒng)OS是Linux;

(5) 結(jié)合Video Codec and Audio Codec