一区二区三区三上|欧美在线视频五区|国产午夜无码在线观看视频|亚洲国产裸体网站|无码成年人影视|亚洲AV亚洲AV|成人开心激情五月|欧美性爱内射视频|超碰人人干人人上|一区二区无码三区亚洲人区久久精品

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

全國產(chǎn)0延時USB3.0 ISP工業(yè)相機(jī)介紹

FPGA圖像加速 ? 來源:瘋狂的FPGA ? 2024-11-13 10:49 ? 次閱讀

當(dāng)下,市場風(fēng)云變幻莫測,國際形勢也持續(xù)刷新我們認(rèn)知,供應(yīng)鏈沒有安全感。鑒于此,產(chǎn)品的自主可控,以及全國產(chǎn)化的需求越來越強(qiáng)烈。國產(chǎn)化一方面要解決本土芯片BOM選型的空缺,另一方面也得在不夠完善的芯片架構(gòu)下,做到過去進(jìn)口芯片的性能、功耗、成本等,這對我們產(chǎn)品的研發(fā),提出了巨大的挑戰(zhàn)。

但是有些路不得不走,國產(chǎn)化沒有退路。如果不在此時負(fù)重前行,未來只會越來越難,國產(chǎn)化是趨勢,是當(dāng)下唯一的選擇。

針對視頻圖像以及目標(biāo)識別、跟蹤等應(yīng)用,奧唯思基于全國產(chǎn)BOM選型設(shè)計,經(jīng)歷了1年的磨練,已經(jīng)完成*規(guī) 7*24小時歸零時間+震動測試,正式推出了全國產(chǎn)0延時USB3.0 ISP工業(yè)相機(jī)解決方案——VU3-1S200CR。

全國產(chǎn)BOM選型

針對一個USB3.0相機(jī),主要的芯片為FPGA、DDR3、USB3.0 PHY、圖像傳感器、FLASH等,除此之外主要的還有晶振、DCDC、接插件、鏡頭等,經(jīng)過多個版本的迭代更新,我們的選型BOM如下:

90a8f8ae-905c-11ef-a511-92fbcf53809c.png

結(jié)合以上國產(chǎn)BOM選型,給出當(dāng)前我們的USB3.0相機(jī)的硬件架構(gòu),如下所示:

90ea818e-905c-11ef-a511-92fbcf53809c.png

0延時ISP圖像處理器

除了基本的國產(chǎn)USB3.0相機(jī),客戶更希望能夠聚焦產(chǎn)品應(yīng)用,想把圖像處理前置;同時,針對目標(biāo)跟蹤,運(yùn)動識別等應(yīng)用場景,對于延時的要求很高,因此采用FPGA實(shí)現(xiàn)0延時全流水線ISP圖像處理,用戶只關(guān)注ARM應(yīng)用層,不僅解決了傳統(tǒng)方案延時的問題,也可以聚焦產(chǎn)品應(yīng)用,做好識別跟蹤。

因此我們花了1年時間,累積迭代了n個版本,自研了一套基于國產(chǎn)FPGA的全流水0延時ISP圖像處理器,如下所示:

9106f620-905c-11ef-a511-92fbcf53809c.png

0延時其實(shí)不是絕對的,實(shí)際計算會有若干行的緩存delay,用來做5*5、7*7的圖像處理算法,相對于一幀16.67ms來說,幾百us的延時微乎其微,約等于0延時。實(shí)測我們的顯示效果,如下:

91294644-905c-11ef-a511-92fbcf53809c.png

備注:暫無時間做專業(yè)性的指標(biāo)測試,目前已滿足客戶需求為準(zhǔn),已經(jīng)成功上機(jī),未來有時間再做指標(biāo)性的測試吧。

苛刻的測試,掉線也得恢復(fù)

國產(chǎn)的芯片雖然出來了,但國產(chǎn)的IP化進(jìn)行還是有一些路要走,撞了南墻撞北墻,我們重寫了很多IP、SDK,萬事開頭難:

重寫了易靈思FPGA的MIPI CSI控制器,來做到更高的穩(wěn)定性(軟核優(yōu)勢)

重寫了方寸T630的SDK,來做到各種壓力測試的穩(wěn)定性來滿足性能

自研了精簡版RISC-V處理器,來實(shí)現(xiàn)復(fù)雜的調(diào)度協(xié)調(diào)工作

正在重新了DDR3控制器,來適應(yīng)低溫以及高溫的DDR3穩(wěn)定性

針對當(dāng)前給客戶定制化量產(chǎn)的0延時USB3.0 ISP相機(jī),相機(jī)整機(jī)的研發(fā)花了4個月,地獄般的測試花了我們8個月,做好一個產(chǎn)品不容易,尤其是國產(chǎn)化的過程更艱辛,要求比商用產(chǎn)品更加苛刻。

首先,未曾想到SMT爬錫也會影響到高低溫、震動場景,以至于最后全部重新補(bǔ)強(qiáng)。如下是錫漿爬錫后的高倍放大鏡測試圖:

91819da8-905c-11ef-a511-92fbcf53809c.png

其次,為了適應(yīng)實(shí)際應(yīng)用中的震動實(shí)驗(yàn),我們甚至這樣做(如下視頻),因此在接口、線纜的選型上也花了巨大的精力,在掉線自動恢復(fù)上甚至花了比正常出圖傳輸更多的代價——所以實(shí)現(xiàn)簡單,異常機(jī)制反而艱難。

最后,總結(jié)一句話:做好一個全國產(chǎn)化產(chǎn)品,不容易。

期待更多合作,我們繼續(xù)做國產(chǎn)化ISP相機(jī)!

總結(jié)

截至目前,我們已經(jīng)幫客戶做了很多接入工作:

雙目U3 ISP相機(jī),接入RK3588

單目U3 ISP相機(jī),接入RK3568

單目BT1120 ISP相機(jī),接入Hi3516

單目MPI ISP相機(jī),接入了NVIDIA AGX Orin

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • ISP
    ISP
    +關(guān)注

    關(guān)注

    6

    文章

    487

    瀏覽量

    52634
  • 工業(yè)相機(jī)
    +關(guān)注

    關(guān)注

    5

    文章

    347

    瀏覽量

    24215

原文標(biāo)題:全國產(chǎn)0延時USB3.0 ISP工業(yè)相機(jī)

文章出處:【微信號:瘋狂的FPGA,微信公眾號:瘋狂的FPGA】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    CYUSB3014無法識別為USB3.0設(shè)備怎么解決?

    。CYUSB3014的供電部分我參考了官方文檔,但是我用0歐姆電阻替代了磁珠。沒有磁珠可能會導(dǎo)致無法被識別為USB3.0設(shè)備嗎?
    發(fā)表于 04-30 07:24

    USB 3.0工業(yè)采集卡功能與應(yīng)用詳解

    USB3.0工業(yè)采集卡是一種專為工業(yè)環(huán)境設(shè)計的高速數(shù)據(jù)采集設(shè)備,主要用于實(shí)時采集傳感器、攝像頭、模擬信號(如電壓、電流)或數(shù)字信號(如開關(guān)量、脈沖信號)等數(shù)據(jù),并通過USB3.0接口傳
    的頭像 發(fā)表于 04-08 15:21 ?210次閱讀
    <b class='flag-5'>USB</b> <b class='flag-5'>3.0</b><b class='flag-5'>工業(yè)</b>采集卡功能與應(yīng)用詳解

    國產(chǎn)芯片沁恒USB 3.0芯片替代方案解析

    USB2517 ? ? 性能提升 ?:CH338X支持USB 3.0 Gen1(5Gbps)高速傳輸,顯著優(yōu)于USB2517的USB 2.0
    的頭像 發(fā)表于 03-10 15:24 ?604次閱讀

    CH634USB3.0HUB控制芯片USB3.0國產(chǎn)控制芯片

    CH634是南京沁恒微電子股份有限公司推出的一款高性能、工業(yè)級4端口USB3.0 HUB控制器芯片,該芯片全面符合USB3.2 Gen1協(xié)議規(guī)范,集成了四口USB HUB和
    的頭像 發(fā)表于 02-07 16:07 ?1450次閱讀
    CH634<b class='flag-5'>USB3.0</b>HUB控制芯片<b class='flag-5'>USB3.0</b><b class='flag-5'>國產(chǎn)</b>控制芯片

    基于FT600Q芯片 的USB3.0設(shè)計,為什么連接PC后設(shè)備無法識別?

    一個基于FT600Q芯片 的USB3.0設(shè)計,進(jìn)行高速傳輸,使用的是Micro usb3.0的接口,但是連接PC端口,顯示無法識別該設(shè)備,請教各位大佬,這種情況是接口的設(shè)計有問題嗎?下面是我的原理圖。*附件:FTDI_FPGA.pdf
    發(fā)表于 01-20 14:48

    軒展科技發(fā)布4K USB3.0編碼采集模塊

    在成功推出新版配備TYPE-C接口的USB3.0編碼采集模塊后,軒展科技再次發(fā)力,近日隆重推出一款集多項(xiàng)先進(jìn)技術(shù)于一體的4K USB3.0編碼采集模塊。作為SONY(中國)FCB攝像機(jī)官方授權(quán)代理商
    的頭像 發(fā)表于 12-30 11:19 ?551次閱讀

    USB3.0 工業(yè)相機(jī)的傳輸速率是否受到電腦主板某些硬件的限制?

    設(shè)置為500FPS,對應(yīng)2ms采集一張照片。 ② 電腦為具有4個USB3.0接口的電腦(臺式機(jī)或者筆記本),目前的測試機(jī)為聯(lián)想拯救者(Ryzen5800H,16GB內(nèi)存,512GB PCI-E 3.0
    發(fā)表于 12-08 21:20

    請問ISO7760能應(yīng)用在USB3.0數(shù)據(jù)上隔離嗎?

    請問ISO7760能應(yīng)用在USB3.0數(shù)據(jù)上隔離嗎? USB3.0的最大傳輸帶寬高達(dá)5.0Gbps而ISO7760手冊上顯示是100Mbps數(shù)據(jù)速率兩者的bps單位一樣,疑惑的是傳輸帶寬和傳輸速率! 請問有那位朋友將ISO7760應(yīng)用再
    發(fā)表于 12-04 08:01

    USB3.0 /TYPE-C接口靜電保護(hù)六路器件

    USB3.0 /TYPE-C接口靜電保護(hù)六路器件
    的頭像 發(fā)表于 11-01 08:02 ?571次閱讀
    <b class='flag-5'>USB3.0</b> /TYPE-C接口靜電保護(hù)六路器件

    USB3.0的識別問題

    做了一個USB3.0集線器,現(xiàn)在遇到這個問題,USB3.0無法識別,插拔幾次后可以識別,接上其他設(shè)備也能正常工作,求高手幫忙啊,怎么處理USB3.0識別問題
    發(fā)表于 10-29 11:36

    晶沛電子USB3.0信號集成滑環(huán)及新型號產(chǎn)品

    晶沛電子在USB3.0信號滑環(huán)領(lǐng)域擁有十多年的研制歷史。
    的頭像 發(fā)表于 10-23 15:05 ?470次閱讀
    晶沛電子<b class='flag-5'>USB3.0</b>信號集成滑環(huán)及新型號產(chǎn)品

    CYUSB3014是否會自動調(diào)整工作模式USB3.0還是USB2.0?

    CYUSB3014是否會自動調(diào)整工作模式USB3.0還是USB2.0?它的工作模式是否可以或怎么通過FLAG傳輸給FPGA?
    發(fā)表于 08-14 08:00

    USB3.0/3.1靜電放電防護(hù)方案

    上眾多的串行和并行接口。 USB3.0的理論速度最高可達(dá)5Gbps,相比USB2.0極大地提升了數(shù)據(jù)傳輸?shù)男屎退俣?,且保持了與USB2.0及更早版本的向后兼容性,用戶可以在USB3.0
    的頭像 發(fā)表于 08-05 17:37 ?912次閱讀
    <b class='flag-5'>USB3.0</b>/3.1靜電放電防護(hù)方案

    請問cyUSB3014 USB3.0的TX和RX可以互換嗎?

    親愛的各位請問cyUSB3014 USB3.0的TX和RX可以互換嗎?
    發(fā)表于 05-29 06:44

    USB2.0型號模擬轉(zhuǎn)換USB3.0輸出

    通過模擬信號轉(zhuǎn)換,將原本輸入進(jìn)來的USB2.0變成USB3.0,使其插到USB3.0的HUB上不會出現(xiàn)2.0降速的問題
    發(fā)表于 05-14 08:47