原創(chuàng) 要聞 證券 基金 保險(xiǎn) 銀行 上市公司 IPO 科創(chuàng)板 汽車 新三板 科技 房地產(chǎn)

如何突破畫質(zhì)天花板:AI“一年迭代可媲美傳統(tǒng)方式十幾年”


中國(guó)產(chǎn)業(yè)經(jīng)濟(jì)信息網(wǎng)   時(shí)間:2021-09-10





  當(dāng)我們拿起手機(jī)拍照時(shí),手機(jī)里的“美顏師”ISP(圖像信號(hào)處理器)進(jìn)行著龐大的計(jì)算,以讓圖像呈現(xiàn)效果接近于人眼實(shí)際看到的景象。ISP經(jīng)過十多年迭代,人類對(duì)圖像質(zhì)量的追求卻不會(huì)停止,畫質(zhì)“天花板”再進(jìn)一步突破還有沒有新方法?

  在近期獲得A+輪數(shù)億元融資后,AI視覺芯片初創(chuàng)企業(yè)愛芯元智(原“愛芯科技”)創(chuàng)始人兼CEO仇肖莘日前對(duì)包括澎湃新聞在內(nèi)的媒體表示,ISP已發(fā)展了近20年,經(jīng)過十幾年迭代達(dá)到了現(xiàn)在的圖片處理水平,但傳統(tǒng)降噪方式已到了相對(duì)極限的地步。而以AI模型替代ISP中的降噪等關(guān)鍵模塊,可以通過不斷訓(xùn)練AI模型提升ISP性能,增強(qiáng)畫質(zhì),讓圖像更清晰。仇肖莘表示,這突破了圖片質(zhì)量提升的“天花板”,“一年迭代的程度可媲美傳統(tǒng)方式十幾年的迭代效果?!睈坌驹浅闪⒂?019年5月,兩年完成三輪融資,總?cè)谫Y金額超10億元人民幣,并在近期宣布完成品牌升級(jí)。與目前業(yè)內(nèi)著眼于云端AI訓(xùn)練和推理的火熱的GPGPU賽道不同,愛芯元智面向邊緣側(cè)和端側(cè)研發(fā)AI視覺推理芯片,并自主研發(fā)面向推理加速的神經(jīng)網(wǎng)絡(luò)處理器。

  ISP主要是用來對(duì)前端圖像傳感器輸出信號(hào)處理的單元。愛芯元智將AI技術(shù)引入ISP,其第一顆AI ISP芯片AX630A去年5月流片,去年12月正式量產(chǎn)。第二顆AI ISP芯片AX620A今年5月流片,7月下旬回片并順利點(diǎn)亮。這兩顆SoC(系統(tǒng)級(jí)芯片)均采用12nm制程,其中AX630A在INT4情況下等效算力28.8T,功耗約3瓦。

  仇肖莘對(duì)澎湃新聞表示,與手機(jī)成像后再用摳圖、美顏、虛化不同,將AI技術(shù)引入ISP是從前端處理圖片,這種方式過去研發(fā)較少,原因在于其所需要的算力更大。NPU(嵌入式神經(jīng)網(wǎng)絡(luò)處理器)擅長(zhǎng)處理視頻、圖像類的海量多媒體數(shù)據(jù),愛芯元智使用特殊的NPU設(shè)計(jì),利用混合精度,能在單位面積內(nèi)提供數(shù)倍于傳統(tǒng)NPU的等效算力,同時(shí)保持低功耗。

  仇肖莘表示,AI視覺芯片應(yīng)用場(chǎng)景非常廣泛,包括智能穿戴、智能家居、智慧城市、自動(dòng)駕駛等都。“比如翻譯筆上的攝像頭一掃就能連續(xù)拍攝多張圖片,把這些圖片拼成一行,再用AI處理?!?/p>

  她舉例說,手機(jī)短視頻放在4K電視上播放就會(huì)顯得畫質(zhì)差,但如果用AI技術(shù)將1080P或720P的視頻源超分成4K或8K,就可以展現(xiàn)出較完美的效果。她說,目前愛芯元智正在研發(fā)下一代AI技術(shù),“讓芯片達(dá)到更高算力,支持比如8K30幀的圖像處理?!?/p>

  “視頻一秒鐘30幀,每一幀圖像的處理時(shí)間只有33毫秒。怎么在33毫秒內(nèi)把降噪、高動(dòng)態(tài)的處理都做完,其實(shí)這是最有挑戰(zhàn)性的工作?!?/p>



  轉(zhuǎn)自:澎湃新聞

  【版權(quán)及免責(zé)聲明】凡本網(wǎng)所屬版權(quán)作品,轉(zhuǎn)載時(shí)須獲得授權(quán)并注明來源“中國(guó)產(chǎn)業(yè)經(jīng)濟(jì)信息網(wǎng)”,違者本網(wǎng)將保留追究其相關(guān)法律責(zé)任的權(quán)力。凡轉(zhuǎn)載文章及企業(yè)宣傳資訊,僅代表作者個(gè)人觀點(diǎn),不代表本網(wǎng)觀點(diǎn)和立場(chǎng)。版權(quán)事宜請(qǐng)聯(lián)系:010-65363056。

延伸閱讀

熱點(diǎn)視頻

政策協(xié)同發(fā)力 做好“十四五”時(shí)期就業(yè)工作 政策協(xié)同發(fā)力 做好“十四五”時(shí)期就業(yè)工作

熱點(diǎn)新聞

熱點(diǎn)輿情

?

微信公眾號(hào)

版權(quán)所有:中國(guó)產(chǎn)業(yè)經(jīng)濟(jì)信息網(wǎng)京ICP備11041399號(hào)-2京公網(wǎng)安備11010502035964