在2023年的FPGA領(lǐng)域頂級(jí)會(huì)議FPL (International Conference on Field Programmable Logic and Applications) 上,由中科馭數(shù)團(tuán)隊(duì)、中國(guó)科學(xué)院計(jì)算技術(shù)研究所處理器芯片全國(guó)重點(diǎn)實(shí)驗(yàn)室團(tuán)隊(duì)共同完成的論文《Co-ViSu: a Video Super-Resolution Accelerator Exploiting Codec Information Reuse》獲得FPL2023最佳論文獎(jiǎng)。該項(xiàng)工作由鄢貴海指導(dǎo)完成,作者包括樊海爽、吳婧雅、盧文巖、李曉維。論文第一作者樊海爽受邀在會(huì)上做口頭報(bào)告。
▲ 《Co-ViSu: a Video Super-Resolution Accelerator Exploiting Codec Information Reuse》獲得FPL2023最佳論文獎(jiǎng)
▲ 論文第一作者樊海爽受邀在會(huì)上做口頭報(bào)告
Co-ViSu是一個(gè)針對(duì)壓縮域視頻超分辨率任務(wù)的FPGA加速引擎。視頻分辨率是將低分辨率視頻轉(zhuǎn)化成高分辨率的任務(wù),其在視頻流服務(wù)、AV/VR、醫(yī)學(xué)等領(lǐng)域都有重要的應(yīng)用,與CNN相比其面臨著計(jì)算復(fù)雜度和內(nèi)存帶寬需求更高的特點(diǎn)。本文提出的Co-ViSu首次在FPGA上協(xié)同設(shè)計(jì)實(shí)現(xiàn)視頻編解碼器和DNN加速器,通過復(fù)用視頻壓縮域編碼信息,Co-ViSu極大地提高了視頻超分系統(tǒng)的吞吐和能效,可支持280FPS的1080P到4K超分計(jì)算,相比于現(xiàn)有最高的SOTA方案吞吐量高2.1倍,能效比提升4.2倍。Co-ViSu協(xié)同設(shè)計(jì)方案可以很好地?cái)U(kuò)展到諸如視頻分割、物體跟蹤以及視頻檢測(cè)等視覺任務(wù)中。
FPL是可編程邏輯和可重構(gòu)計(jì)算領(lǐng)域歷史最悠久、最大的國(guó)際會(huì)議,也是該領(lǐng)域的頂級(jí)會(huì)議之一,主要收錄可重構(gòu)架構(gòu)設(shè)計(jì)、應(yīng)用、嵌入式處理、設(shè)計(jì)自動(dòng)化等方向的研究工作。第33屆FPL會(huì)議由瑞典查爾姆斯理工大學(xué)主辦,F(xiàn)ull-paper錄用率為23.7%。
處理器芯片全國(guó)重點(diǎn)實(shí)驗(yàn)室是中國(guó)科學(xué)院批準(zhǔn)正式啟動(dòng)建設(shè)的首批重點(diǎn)實(shí)驗(yàn)室之一。中科馭數(shù)和處理器芯片全國(guó)重點(diǎn)實(shí)驗(yàn)室為戰(zhàn)略合作伙伴關(guān)系,雙方積極推進(jìn)產(chǎn)學(xué)研緊密合作,助推國(guó)產(chǎn)DPU技術(shù)創(chuàng)新高地建設(shè)。