電子發(fā)燒友網(wǎng)報(bào)道（文/莫婷婷）AI智能眼鏡作為新興的可穿戴設(shè)備正在加速發(fā)展。如今，智能眼鏡不僅具備基本的聽音樂功能，還需要支持一系列先進(jìn)的AI功能以提供更加個(gè)性化和高效的用戶體驗(yàn)。這些AI功能包括但不限于語(yǔ)音識(shí)別與控制、實(shí)時(shí)翻譯、圖像識(shí)別與增強(qiáng)現(xiàn)實(shí)（AR）等。為了支持上述高級(jí)功能，智能眼鏡對(duì)其主控芯片提出了更高的要求。


智能眼鏡AI性能需求提升，新一代芯片該如何設(shè)計(jì)

當(dāng)前，新一代AI/AR智能眼鏡的核心設(shè)計(jì)需求是什么。具體有以下四大方面：一是輕量化設(shè)計(jì)、全天候佩戴；二是第一視角的智能拍照錄像；三是智能功能與語(yǔ)音助手，在選擇AI大模型時(shí)，不僅僅要考慮云端大模型，還要考慮端側(cè)大模型；四是近眼顯示與AR交互。這些需求都給芯片設(shè)計(jì)工程師提出了挑戰(zhàn)。

此前，業(yè)內(nèi)人士將AI智能眼鏡理解為智能手表方案Plus，但事實(shí)上，智能手表方案與AI智能眼鏡的方案有很大不同，最大的區(qū)別就是加入了視覺部分。意法半導(dǎo)體Alex Li表示，“從芯片設(shè)計(jì)角度來(lái)說，這是非常具有挑戰(zhàn)的工作，因?yàn)檫@個(gè)時(shí)候我們要考慮到芯片的尺寸、功耗，還有視覺應(yīng)用的場(chǎng)景”。


那么，面向AR/AI 智能眼鏡應(yīng)用的芯片設(shè)計(jì)有哪些需求呢？Alex Li提到了七大方面：

一是高性能與低功耗，包括主頻為550MHz~2.5GHZ，1080P@30FPS H.264/H.265 encoding 低于300mW待機(jī)功耗低至 3-5mW。二是在相機(jī)系統(tǒng)方面，500萬(wàn)像素起步，典型要求 1200萬(wàn)像素，未來(lái)可到2000 萬(wàn)像素，接近手機(jī)的專業(yè) ISP(3A,EIS等)。三是引入NPU AI加速，AI算力達(dá)0.5 TOPS，甚至達(dá)到2.5 TOPS。

四是顯示系統(tǒng)，支持QSPI、MIPI-DSI接口。五是音頻系統(tǒng)，搭載陣列麥克風(fēng)，支持降噪、通話、音樂等功能。六是無(wú)線連接系統(tǒng)，支持低功耗Wi-Fi 6，雙模藍(lán)牙。七是高集成度小封裝，“現(xiàn)階段，大部分客戶普遍要求10×10mm，但也有客戶要求寬度做到6mm以下”，Alex Li認(rèn)為，下一代芯片的寬度將更小。

當(dāng)然，芯片的性能也并不是越高越好，例如支持的NPU算力越大，芯片的體積也會(huì)增加，功耗也會(huì)增加，這是所有芯片設(shè)計(jì)工程師都需要解決的性能平衡挑戰(zhàn)。


高通驍龍AR1平臺(tái)引領(lǐng)行業(yè)，STM32N6也成香餑餑

在AI智能眼鏡領(lǐng)域，ST和高通驍龍AR平臺(tái)憑借其各自的技術(shù)優(yōu)勢(shì)推出了多款產(chǎn)品。2023年，高通發(fā)布了全新空間計(jì)算平臺(tái)第一代驍龍AR1。高通驍龍AR1專為AR智能眼鏡而設(shè)計(jì)，如今已經(jīng)被雷朋Meta Wayfarer智能眼鏡、RayNeo雷鳥V3智?能眼鏡、Rokid Glasses AR+AI智能眼鏡等產(chǎn)品使用。

根據(jù)介紹，高通驍龍AR1平臺(tái)支持Wi-Fi 7，峰值速度高達(dá)5.8Gbps，處理器搭載了第三代Hexagon NPU。面向AI智能眼鏡的拍攝功能，高通驍龍AR1采用 14-bit 雙 ISP，可以支持1200 萬(wàn)像素的照片拍攝和 600 萬(wàn)像素的視頻拍攝。AR1還集成AI多模態(tài)識(shí)別技術(shù)，提高照片和視頻的拍攝質(zhì)量。

針對(duì)AI帶來(lái)的需求，AR1平臺(tái)高效的中央處理單元（CPU）和圖形處理單元（GPU），可以支持復(fù)雜的計(jì)算任務(wù)和實(shí)時(shí)圖像處理。在眼鏡側(cè)AI，針對(duì)拍攝性能，AR1平臺(tái)通過計(jì)算機(jī)視覺輔助可以提高拍攝照片以及視頻的質(zhì)量。針對(duì)語(yǔ)音交互能力，AR1平臺(tái)支持語(yǔ)音指令，可以通過AI將信息具現(xiàn)化，讓用戶在智能眼鏡上看到結(jié)合現(xiàn)實(shí)情景的信息，完成翻譯、導(dǎo)航等功能。




值得一提的是，AR1平臺(tái)還是一款可擴(kuò)展平臺(tái)，可用于拍攝和音頻為主要功能的AI智能眼鏡，以及AR智能眼鏡（單目顯示、雙目顯示）不同配置的智能眼鏡。

業(yè)內(nèi)人士透露，高通驍龍AR1平臺(tái)將在今年迎來(lái)迭代更新，包括制程工藝、AI性能也會(huì)進(jìn)一步提升。

2024年12月，ST推出的新一代邊緣AI MCU ——STM32N6 MCU同樣可用于AI智能眼鏡。Alex Li透露，在短短4個(gè)月的時(shí)間，注冊(cè)的客戶就超過50家。這不僅反映了市場(chǎng)對(duì)STM32N6 MCU的高度關(guān)注和認(rèn)可，更直接證明了其卓越的性能、出色的能效比以及廣泛的適用性。



STM32N6系列 MCU是ST首款MCU+NPU+ISP架構(gòu)的產(chǎn)品，提升了算力水平，處理能力高達(dá)600GOPS。采用 16nm FinFET 工藝，搭載 32 位 Arm Cortex - M55 CPU，引入了 Arm Helium 矢量處理技術(shù)，還搭載了自研 Neural - ART 專用 NPU ，提供高達(dá) 600 GOPS 的 AI 算力能夠更快速且準(zhǔn)確地處理機(jī)器學(xué)習(xí)算法、圖像識(shí)別、語(yǔ)音處理等各種AI任務(wù)。

例如，STM32N6x7AI系列搭載了領(lǐng)先的邊緣AI的MCU 內(nèi)核、最新的NPU處理單元。還內(nèi)置了大容量嵌入式SRAM+靈活的存儲(chǔ)接口，還帶有專用的相機(jī)處理架構(gòu)，多個(gè)攝像頭接口

ST提供了完善的 AI 軟件生態(tài)系統(tǒng)，并可以為客戶的所有設(shè)計(jì)步驟中提供支持的工具和軟件，增加了STM32CubeMX圖形配置工具 ，可以做邊緣AI模型部署，例如主流框架的AI模型都可以通過STM32CubeMX更方便地跑在ST的MCU上。