很多玩直播的人、或是看直播可能會(huì)有切身的體會(huì)。咱們?cè)诳粗辈サ臅r(shí)候,如果是視頻效果稍有不佳,就會(huì)有著隨時(shí)切換直播間的念頭。咱們自己在做直播的時(shí)候,一覺(jué)得自己的直播間視頻沒(méi)有別家好,就會(huì)想著提升自己的裝備,例如增加補(bǔ)光燈、配備更好的相機(jī)鏡頭,或是換一臺(tái)更強(qiáng)大功能的智能手機(jī),來(lái)做直播??傊?,視頻直播黨漸漸地都變成了裝備黨。
目前我所用過(guò)的很多旗艦手機(jī),在夜景或強(qiáng)光下,拍照效果還是很不錯(cuò),但視頻的時(shí)候噪點(diǎn)太多,畫面時(shí)好時(shí)壞,或是人臉的膚色失真,自己都對(duì)自己不滿意,主動(dòng)給視頻后期師加雞腿。但是直播中加雞腿給攝影師也沒(méi)有用,裝備不給力,攝影師也只能說(shuō),“臣妾也做不到”。
由此看來(lái),這一塊用戶需求很剛,但智能手機(jī)廠商也是有力使不上。畢竟,關(guān)于視頻AI優(yōu)化的技術(shù),遠(yuǎn)比圖像AI優(yōu)化的難度大。再加上這種特別的需求,目前也就在中國(guó)需求最廣最強(qiáng)。因?yàn)橹袊?guó)的美圖優(yōu)化好多年以來(lái),已經(jīng)寵壞了用戶。不加美顏給美女帥哥拍照,那簡(jiǎn)直是不懂禮節(jié),不P圖就發(fā)朋友圈,完全是不講武德。
還好,咱們手機(jī)廠商、拍照直播類APP廠商,也是很懂用戶需求的。手機(jī)大廠這些年,也不知道是雷總還是余總帶的頭,都是特別寵粉。所以粉絲提的需求,都是一律都不遺力的支持。這不風(fēng)水轉(zhuǎn)到了視頻優(yōu)化這個(gè)階段了,誰(shuí)能先上個(gè)邊緣側(cè)的AI ISP,明顯提升視頻優(yōu)化的算力與算法,那誰(shuí)就有可能獨(dú)得粉絲的寵愛(ài)。
與之類似的,關(guān)于視頻AI算法能力的需求,推廣到智慧城市、智慧社區(qū)、自動(dòng)駕駛或是智能制造等領(lǐng)域,對(duì)于高清視頻ISP的算法優(yōu)化上,其需求現(xiàn)在看,技術(shù)天花板也都看不到上限。
電子發(fā)燒友網(wǎng)記者日前專訪了國(guó)內(nèi)專門做AI ISP芯片的初創(chuàng)公司愛(ài)芯元智半導(dǎo)體(上海)有限公司 創(chuàng)始人兼首席執(zhí)行官仇肖莘,她從多個(gè)角度深入地解答了我們的問(wèn)題。訪談中我們了解到,目前做視頻處理的芯片公司中,愛(ài)芯元智的獨(dú)門AI絕技,可能還遠(yuǎn)不止于消費(fèi)級(jí)應(yīng)用的藍(lán)海級(jí)市場(chǎng)。下面是電子發(fā)燒友網(wǎng)的采訪報(bào)道。
2021年9月,AI視覺(jué)芯片研發(fā)及基礎(chǔ)算力平臺(tái)初創(chuàng)公司愛(ài)芯科技正式更名為愛(ài)芯元智半導(dǎo)體(上海)有限公司(簡(jiǎn)稱為“愛(ài)芯元智”),并宣布完成品牌升級(jí)。愛(ài)芯元智成立于2019年5月,專注于打造高性能、低功耗的人工智能視覺(jué)處理器芯片。核心技術(shù)產(chǎn)品支持多種AI視覺(jué)任務(wù),廣泛適用于智慧城市、智能社區(qū)、智能駕駛、智慧零售、智能家居、智能穿戴等多個(gè)領(lǐng)域。愛(ài)芯元智自主研發(fā)的第一顆AI視覺(jué)處理芯片AX630A已在2020年12月實(shí)現(xiàn)量產(chǎn),第二顆芯片AX620A也已經(jīng)于2021年7月成功點(diǎn)亮,即將開(kāi)始正式的客戶推廣。
仇肖莘博士本身就是一個(gè)手機(jī)通信行業(yè)的高級(jí)技術(shù)與管理人才,有著非常傳奇的個(gè)人職業(yè)經(jīng)歷。
下面是電子發(fā)燒友摘選愛(ài)芯元智公司的對(duì)外宣傳資料。
仇肖莘博士1991年畢業(yè)于清華大學(xué)自動(dòng)化專業(yè),并獲得碩士學(xué)位,隨后前往美國(guó)南加州大學(xué)完成電子工程博士學(xué)位。先后擔(dān)任美國(guó)博通公司副總裁,紫光展銳首席技術(shù)官。
2019年5月創(chuàng)立并擔(dān)任愛(ài)芯元智半導(dǎo)體(上海)有限公司(原愛(ài)芯科技)首席執(zhí)行官,作為公司最高負(fù)責(zé)人,領(lǐng)導(dǎo)研發(fā)AI SoC芯片——能夠廣泛應(yīng)用于智慧城市、智能社區(qū)、智能駕駛、智慧零售、智能家居、智能穿戴等多個(gè)領(lǐng)域。
仇博士在Fortune 500 公司有20年以上研發(fā)及管理經(jīng)驗(yàn),曾擔(dān)任重要崗位負(fù)責(zé)人,帶領(lǐng)過(guò)大型國(guó)際化團(tuán)隊(duì)。精通公司業(yè)務(wù)發(fā)展戰(zhàn)略,兼具極強(qiáng)的研發(fā)及團(tuán)隊(duì)、項(xiàng)目管理能力,對(duì)公司業(yè)績(jī)做出過(guò)突出貢獻(xiàn)。其在SoC芯片研發(fā)、系統(tǒng)架構(gòu),及整體技術(shù)平臺(tái)解決方案方面具有極強(qiáng)的專業(yè)知識(shí)和豐富的經(jīng)驗(yàn)。
2008年仇肖莘博士當(dāng)選美國(guó)博通公司杰出工程師(在研發(fā)人員中占比小于0.5%),被Broadcom內(nèi)部人才管理體系評(píng)為“頂級(jí)明星”;曾作為Broadcom CEO及其管理團(tuán)隊(duì)的技術(shù)顧問(wèn),深度參與技術(shù)路線制定,M&A項(xiàng)目的技術(shù)調(diào)研。
Featured engineer in National Academy of Engineering’s Celebration of Women Engineering.AT&T Labs - Research(前身貝爾實(shí)驗(yàn)室) 研究卓越獎(jiǎng)。
正是因?yàn)橛性诓┩ê妥瞎庹逛J的手機(jī)SoC芯片部門的研發(fā)與管理經(jīng)驗(yàn),仇總對(duì)于手機(jī)廠商的硬件需求特別熟悉。所以愛(ài)芯元智可以在一年左右的時(shí)間就一次性成功流片高端的AI SoC,并且獲得了晶圓廠的產(chǎn)能支持。
仇總介紹,愛(ài)芯元智(原愛(ài)芯科技)是一個(gè)AI視覺(jué)芯片研發(fā)及基礎(chǔ)算力平臺(tái)公司。其產(chǎn)品策略跟國(guó)內(nèi)眾多的視頻處理器公司或ISP公司不同的是,公司第一顆芯片就是做行業(yè)最強(qiáng)最高的芯片技術(shù),匹配市場(chǎng)中的高端應(yīng)用。由于眾所周知的原因,智慧城市、智能交通等市場(chǎng),出現(xiàn)了供貨的真空期。面對(duì)如此巨大的市場(chǎng),有多家芯片公司都在發(fā)力,但大多數(shù)公司,由于技術(shù)歷史的原因,例如做平板、電視或顯示器的企業(yè),公司之前的技術(shù)積累主要在視頻編解碼,或圖像顯示端,或者說(shuō)是GPU的能力很強(qiáng),但I(xiàn)SP端并沒(méi)有太發(fā)力。而愛(ài)芯元智從團(tuán)隊(duì)搭建開(kāi)始,就是構(gòu)建視頻的ISP算法團(tuán)隊(duì)、NPU團(tuán)隊(duì),并且重點(diǎn)在邊緣側(cè),而不是云端。避免跟大算力大功耗的CPU和NPU競(jìng)爭(zhēng)。
仇總表示,愛(ài)芯元智專注于高性能、低功耗的人工智能處理器芯片研發(fā),并自主研發(fā)面向推理加速的神經(jīng)網(wǎng)絡(luò)處理器IP (NPU IP)。
目前,愛(ài)芯內(nèi)部負(fù)責(zé)芯片設(shè)計(jì)、AI算法和應(yīng)用開(kāi)發(fā)的研發(fā)員工人數(shù),已近公司總?cè)藬?shù)的85%。隨著AX630A的量產(chǎn),研發(fā)團(tuán)隊(duì)已經(jīng)開(kāi)始跟頭部首波客戶一起合作,盡快做進(jìn)客戶的產(chǎn)品中,一起推到市場(chǎng)。
在頭波客戶需求成熟對(duì)接的同時(shí),仇總和團(tuán)隊(duì)也在同步開(kāi)發(fā)匹配市場(chǎng)主流應(yīng)用定位的產(chǎn)品,從上往下做,把量做大業(yè)績(jī)做大。同時(shí)為產(chǎn)品找到更多的應(yīng)用市場(chǎng),例如我們?cè)谖恼麻_(kāi)頭所說(shuō)的手機(jī)上的ISP視頻AI優(yōu)化的應(yīng)用。
公開(kāi)資料顯示,愛(ài)芯元智通過(guò)神經(jīng)網(wǎng)絡(luò)提升畫質(zhì),支持多種視覺(jué)任務(wù)開(kāi)發(fā)。愛(ài)芯元智核心技術(shù)產(chǎn)品廣泛適用于智慧城市、智能社區(qū)、智能駕駛、智慧零售、智能家居、智能穿戴等多個(gè)領(lǐng)域?;谒惴ā⑿酒?、產(chǎn)品的垂直整合,愛(ài)芯元智為合作伙伴提供全棧式解決方案,幫助客戶實(shí)現(xiàn)最新技術(shù)的快速落地。與此同時(shí),公司制定了完善的產(chǎn)品路線圖,覆蓋高中低端市場(chǎng),以滿足客戶不同場(chǎng)景的產(chǎn)品需求。
而智能手機(jī)或智能相機(jī)這類消費(fèi)級(jí)的需求,愛(ài)芯元智既可以在后面推出更加靈活的合作方案例如IP級(jí)的合作,或是更低成本定制化的芯片。
在ISP方面,愛(ài)芯元智還引入了一位ISP行業(yè)的牛人張興。張興現(xiàn)在是愛(ài)芯元智半導(dǎo)體(上海)有限公司 ISP負(fù)責(zé)人、系統(tǒng)架構(gòu)師。他的工作經(jīng)驗(yàn)專注在ISP多年。據(jù)資料顯示,張興 自2013年開(kāi)始,從事芯片及設(shè)備上ISP/camera相關(guān)設(shè)計(jì)經(jīng)驗(yàn),曾在多家世界500強(qiáng)的公司及tier-1芯片公司從事camera和ISP的系統(tǒng)設(shè)計(jì)工作;他具有豐富的算法設(shè)計(jì)經(jīng)驗(yàn),曾進(jìn)行多個(gè)業(yè)界先進(jìn)算法和方案的設(shè)計(jì)和改進(jìn),在camera領(lǐng)域有多項(xiàng)專利;他還是知名公眾號(hào)“大話成像”創(chuàng)始人之一。
當(dāng)然,我們不能說(shuō)國(guó)內(nèi)其他公司的ISP算法團(tuán)隊(duì)技術(shù)就不強(qiáng)。只是過(guò)去很多年,視頻ISP的技術(shù)大牛國(guó)內(nèi)并不多,而一些特別強(qiáng)大的團(tuán)隊(duì)在日本、歐洲等地。既要有AI NPU卷積的算法能力,也還要結(jié)合客戶需求來(lái)不斷推理訓(xùn)練。
愛(ài)芯元智的AI芯片AX630A的特點(diǎn)是算法協(xié)同設(shè)計(jì),每秒處理幀數(shù)可以達(dá)到 1356,遠(yuǎn)超市場(chǎng)水平。
在功耗方面,AX630A的算力是57.6TOPS@800MHz 2w4的功耗是3W左右。下一代的AX620A算力28.8TOPS@800MHz 2w4的功耗低于1W。
從案例3中可以看出,AX630A其實(shí)可以當(dāng)作多路視頻后端分析。
總結(jié)
目前來(lái)看,智慧城市市場(chǎng)確實(shí)屬于芯片供應(yīng)真空期,市場(chǎng)需求有AX630A這樣的芯片,來(lái)支持相關(guān)的廠商。但作為一個(gè)曾經(jīng)在博通、展銳這樣的大公司SoC部門管理操盤過(guò)的大咖來(lái)說(shuō),能夠做到更多的應(yīng)用市場(chǎng),尤其是智能手機(jī)、相機(jī)這樣的海量市場(chǎng),公司的前景會(huì)遠(yuǎn)超人們的預(yù)期。
文章開(kāi)頭是一個(gè)由電子發(fā)燒友網(wǎng)記者本人開(kāi)啟的話題,相信未來(lái)很快會(huì)有愛(ài)芯元智或別的公司進(jìn)入來(lái)打開(kāi)視頻ISP的更廣的應(yīng)用空間。畢竟視頻直播已經(jīng)從娛樂(lè)級(jí)應(yīng)用提升為生產(chǎn)力工具的級(jí)別,也就是說(shuō)從柔性需求,上升到市場(chǎng)剛需。
今年市場(chǎng)上索尼用于直播的幾款相機(jī)漲價(jià)缺貨,也是直播業(yè)者的剛需猛漲。相信很多廠商已經(jīng)看到了商機(jī),無(wú)論是從手機(jī)端來(lái)改進(jìn),還是單獨(dú)的可用于直播的相機(jī)品類的開(kāi)發(fā),都離不開(kāi)ISP技術(shù)廠商的支持。電子發(fā)燒友網(wǎng)編輯會(huì)持續(xù)關(guān)注和報(bào)道這個(gè)賽道。
責(zé)任編輯:haq
-
APP
+關(guān)注
關(guān)注
33文章
1586瀏覽量
74233 -
ISP
+關(guān)注
關(guān)注
6文章
492瀏覽量
53123 -
AI
+關(guān)注
關(guān)注
88文章
35109瀏覽量
279594
原文標(biāo)題:愛(ài)芯元智的AI ISP夢(mèng)想 幫助更多人解決邊緣側(cè)高清視頻優(yōu)化的難題
文章出處:【微信號(hào):elecfans,微信公眾號(hào):電子發(fā)燒友網(wǎng)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
NVIDIA推出全新智慧城市AI Blueprint

智慧城市排水?dāng)?shù)字信息化管控平臺(tái) #智慧城市排水?dāng)?shù)字信息化管控平臺(tái) #城市內(nèi)澇監(jiān)測(cè)預(yù)警 #道路積水監(jiān)測(cè)預(yù)警
智慧路燈的市場(chǎng)前景如何
PoE交換機(jī)如何助力智慧城市基礎(chǔ)設(shè)施建設(shè)?
智慧路燈照亮城市之光
真空斷路器的市場(chǎng)前景與發(fā)展趨勢(shì)
物聯(lián)網(wǎng)如何改變智慧城市
濟(jì)南智慧照明:盾華智慧物聯(lián)網(wǎng)城市智慧路燈 點(diǎn)亮城市璀璨之光

智慧城市與大數(shù)據(jù)的關(guān)系
智慧城市的定義與特點(diǎn)
智慧城市管理系統(tǒng):開(kāi)啟未來(lái)城市新征程

評(píng)論