昨日,vivo舉行了雙芯×影像技術(shù)溝通會,會上介紹了vivo與聯(lián)發(fā)科的深度合作,且發(fā)布了第二代自研影像芯片V2。
2021 年以來,vivo 已經(jīng)推出了 V1、V1 + 兩代自研芯片,此次自研芯片 V2 采用全新迭代的 AI-ISP 架構(gòu),帶來兼容性和功能性的全面提升,對片上內(nèi)存單元、AI 計算單元、圖像處理單元進行大幅升級。提出 FIT 雙芯互聯(lián)技術(shù),在自研芯片 V2 與天璣 9200 旗艦平臺之間建立起全新的高速通信機制,使兩顆架構(gòu)和指令集完全不同的芯片在 1/100 秒內(nèi)完成雙芯互聯(lián)同步,實現(xiàn)了數(shù)據(jù)和算力的優(yōu)化協(xié)調(diào)與高速協(xié)同。
據(jù)介紹,得益于近存 DLA(vivo 自研 AI 深度學(xué)習(xí)加速器)模塊和大容量專用片上 SRAM(高速低耗緩存單元),自研芯片 V2 對算力容量、算力密度和數(shù)據(jù)密度進行了重新匹配,大幅提升片上緩存的容量和運算速度。與通常 NPU 采用的 DDR 外存設(shè)計相比,SRAM 數(shù)據(jù)吞吐功耗理論最大可減少 99.2%,相比傳統(tǒng) NPU 能效比提升 200%。
FIT 雙芯互聯(lián)和近存 DLA 的結(jié)構(gòu)設(shè)計使自研芯片 V2 的 AI-ISP 架構(gòu)得以建立,并與平臺芯片 NPU 實現(xiàn) ISP 算法和算力的互補,實現(xiàn)極致的圖像處理效果和極致能效比。
本次溝通會上,vivo 還帶來了長焦影像、運動抓拍、暗光抓拍等進階版自研影像算法,在自研芯片 V2 固化算法能力和新增 HDR、NR 和 ProMEMC 的加持下,將 vivo 移動影像技術(shù)推向新的高度。
以光學(xué)超分算法為核心的“超清畫質(zhì)引擎”,可以恢復(fù) 5 倍以上焦段約 35% 的清晰度信息;Ultra Zoom EIS 技術(shù)綜合了 IMU、OIS 和 EIS 三大模塊,在高倍變焦拍攝過程中有效抵消抖動,確保預(yù)覽畫面穩(wěn)定性,即使手持也能穩(wěn)穩(wěn)運鏡。
為解決快門延遲問題,縮短手機拍攝與專業(yè)相機之間的差距,vivo 研發(fā)了“零延時”抓拍和新一代運動檢測算法。通過優(yōu)化圖像處理流程提升傳感器啟動速度,將快門延遲時間縮短到 30ms,達到專業(yè)相機水準(zhǔn)。
為滿足專業(yè)用戶的全場景影像需求,vivo 還通過算法疊加和攝影全鏈路優(yōu)化實現(xiàn)了暗光抓拍功能,大幅提升傳感器在暗光場景下的感光能力;通過多幀融合技術(shù)和自研 RawEnhance 2.0 算法實現(xiàn)運動畫面疊加、消除拖影,使用戶能夠在暗光環(huán)境下輕松捕捉高品質(zhì)的動態(tài)畫面。
vivo 將全球首發(fā)天璣 9200 處理器,該處理器基于臺積電第二代 4nm 制程技術(shù)開發(fā)而成,vivo 稱在極早期就介入了天璣 9200 旗艦平臺的研發(fā),通過雙方長達 20 個月的密切合作,帶來以 MCQ 多循環(huán)隊列、王者榮耀自適應(yīng)畫質(zhì)模式、芯片護眼、APU 框架融合以及 AI 機場模式為核心的 5 項聯(lián)合研發(fā)功能。
MCQ 多循環(huán)隊列是為發(fā)揮 CPU 極致性能而重新定義的一款全新處理引擎,最多可支持 CPU 和 UFS 之間的 8 通道數(shù)據(jù)傳輸,讓應(yīng)用軟件的切換和后臺下載喚醒更快、更流暢。
王者榮耀自適應(yīng)畫質(zhì)模式,是由 vivo、MediaTek、王者榮耀三方聯(lián)合研發(fā),基于 MAGT 游戲自適應(yīng)循環(huán)開發(fā)的一項黑科技。開啟自適應(yīng)功能后,26℃環(huán)境下,在王者榮耀 120 + 極致配置下運行 1 小時,游戲幀率接近滿幀,均方差僅有 0.92,達到業(yè)界頂級水平。
芯片護眼技術(shù)通過實時監(jiān)測畫面藍光占比,通過創(chuàng)新性的算法并硬化成 IP 的方式實時降低藍光,讓高能可見藍光占比小于 5%,色偏程度降低 12%。同時根據(jù)監(jiān)測結(jié)果動態(tài)調(diào)整畫面色彩效果,在降低藍光的同時保證屏幕不偏色。
APU 框架融合則是 vivo 基于天璣 9200 旗艦平臺第六代 APU 的硬件特性,將 MediaTek 的底層通用能力,封裝到自研 VCAP 異構(gòu)計算加速平臺中。從平臺底層到框架層實現(xiàn)深度優(yōu)化,讓算法在多個處理器之間協(xié)同調(diào)度,帶來顯著的能效提升,并以此推出相機超清文檔、實況文本等功能。
AI 機場模式可在用戶乘機飛行期間實現(xiàn)平均節(jié)能 30%;關(guān)閉飛行模式后,最快可在 1.52 秒內(nèi)迅速恢復(fù)網(wǎng)絡(luò)連接,讓復(fù)網(wǎng)速度快人一步。
除了聯(lián)合研發(fā),vivo 與聯(lián)發(fā)科還就多項細節(jié)進行了聯(lián)合調(diào)校,幫助天璣 9200 旗艦平臺發(fā)揮極致性能,安兔兔實驗室跑分超過 128 萬。
游戲場景下,vivo 帶來了游戲超分等技術(shù),并通過疾速啟動引擎和網(wǎng)絡(luò)加速引擎對游戲體驗進行多環(huán)節(jié)、全方位優(yōu)化;影像場景下,首次以極低的功耗實現(xiàn)了先進的循環(huán)視差網(wǎng)絡(luò),大幅優(yōu)化能效表現(xiàn),能耗降低 15%。尤其在 4K 60 幀極限錄像場景中,天璣 9200 的功耗相比天璣 9000 降低了 25%。
原創(chuàng)文章,作者:若安丶,如若轉(zhuǎn)載,請注明出處:http://2079x.cn/article/564162.html