本文為對(duì)聯(lián)捷科技研發(fā)總監(jiān)周小鵬的郵件采訪(fǎng)整理而成，探討了FPGA與CPU和ASIC的優(yōu)勢(shì)與不足。對(duì)于用戶(hù)而言，F(xiàn)PGA在云端應(yīng)用兼顧了速度和靈活性。未來(lái)，聯(lián)捷科技考慮對(duì)更多圖片和視頻Codec支持。在LiveVideoStackCon2019上海音視頻技術(shù)大會(huì)上，周小鵬將詳細(xì)介紹FPGA異構(gòu)計(jì)算在多媒體處理中的應(yīng)用。

LiveVideoStack：周小鵬你好，簡(jiǎn)單介紹下自己的工作經(jīng)歷，以及在聯(lián)捷科技負(fù)責(zé)的工作內(nèi)容和感興趣的技術(shù)方向。

周小鵬：從事FPGA和系統(tǒng)開(kāi)發(fā)有10年時(shí)間，大概有7年時(shí)間是從事多媒體方面的應(yīng)用和開(kāi)發(fā)。在聯(lián)捷科技主要負(fù)責(zé)FPGA加速的整個(gè)后臺(tái)開(kāi)發(fā)，感興趣的方向包括多媒體處理和FPGA異構(gòu)計(jì)算。

LiveVideoStack：能否簡(jiǎn)單介紹下聯(lián)捷科技，其核心技術(shù)和服務(wù)的業(yè)務(wù)場(chǎng)景是？

周小鵬：聯(lián)捷科技的核心技術(shù)是基于FPGA的多媒體加速處理，主要的業(yè)務(wù)場(chǎng)景是圖像轉(zhuǎn)碼、圖像處理、視頻轉(zhuǎn)碼。

LiveVideoStack：我們知道相對(duì)于ASIC而言，F(xiàn)PGA擁有更好的靈活性，可以針對(duì)客戶(hù)需求進(jìn)行優(yōu)化。能否從一線(xiàn)的FPGA技術(shù)專(zhuān)家的角度，介紹下FPGA的優(yōu)勢(shì)與不足？

周小鵬：FPGA的開(kāi)發(fā)相對(duì)于ASIC來(lái)講開(kāi)發(fā)難度要低一些，另外，現(xiàn)在FPGA的開(kāi)發(fā)也有一些高層建模的技術(shù)出現(xiàn)，來(lái)提升開(kāi)發(fā)效率。FPGA的優(yōu)勢(shì)主要是可以實(shí)現(xiàn)深度流水和混合數(shù)據(jù)指令流，來(lái)實(shí)現(xiàn)計(jì)算加速，另外FPGA還有豐富的接口，也能給應(yīng)用帶來(lái)系統(tǒng)級(jí)的整合好處。不足的地方是，F(xiàn)PGA的開(kāi)發(fā)效率還是比CPU低，另外應(yīng)用生態(tài)不夠健全。

LiveVideoStack：FPGA對(duì)于主流的圖像、視頻處理框架或庫(kù)（比如FFmpeg，OpenCV等）支持的如何？

周小鵬：FPGA本身沒(méi)有支持這些主流框架和庫(kù)，這就是我們現(xiàn)在做的工作。

LiveVideoStack：對(duì)于一名視頻工程師而言，基于FPGA的設(shè)備做應(yīng)用開(kāi)發(fā)（比如使用FFmpeg轉(zhuǎn)碼），和在x86平臺(tái)上實(shí)現(xiàn)有什么區(qū)別？開(kāi)發(fā)難度是否更高？

周小鵬：對(duì)于應(yīng)用工程師而言，沒(méi)有區(qū)別。我們會(huì)把FPGA的加速細(xì)節(jié)屏蔽，我們會(huì)把FPGA加速功能，在軟件層做成FFmpeg的plugin。

LiveVideoStack：您如何看FPGA在圖像、視頻處理領(lǐng)域的未來(lái)？一些ASIC實(shí)現(xiàn)了更好的圖像處理畫(huà)質(zhì)，由于ASIC天然的低功耗、高效率等優(yōu)勢(shì)，F(xiàn)PGA的優(yōu)勢(shì)體現(xiàn)在哪里？

周小鵬：圖像、視頻處理的應(yīng)用場(chǎng)景其實(shí)很多，ASIC和FPGA應(yīng)該都會(huì)有各自使用場(chǎng)景。比如，在端側(cè)，低功耗、高效率是必須的，ASIC會(huì)是更好的選擇。而在云端，除了性能要求高，更看重靈活性，這點(diǎn)FPGA比ASIC更容易達(dá)到。

LiveVideoStack：Codec呈現(xiàn)出群雄爭(zhēng)霸的局面，聯(lián)捷的產(chǎn)品支持了哪些Codec？未來(lái)考慮或計(jì)劃支持哪些新的Codec？

周小鵬：當(dāng)前圖像支持了JPEG、WebP、HEIF之間的互轉(zhuǎn)，還有Lepton等用于無(wú)損存儲(chǔ)的Codec；視頻支持H.264、H.265。未來(lái)也會(huì)考慮支持AV1，AVIF，AVS2等。

LiveVideoStack：最后，能否劇透下你在LiveVideoStackCon2019上海音視頻技術(shù)大會(huì)上的分享？

周小鵬：主要是分享我們?cè)诋a(chǎn)品開(kāi)發(fā)和推廣中的一些問(wèn)題和解決方法。