AI推理框架軟件ONNX Runtime正式支持龍架構(gòu)

近日,知名AI推理框架開(kāi)源社區(qū)ONNX Runtime正式發(fā)布支持龍架構(gòu)的版本1.17.0。今后,用戶可以直接使用ONNX Runtime開(kāi)源社區(qū)發(fā)布的版本在龍芯平臺(tái)完成AI推理類(lèi)應(yīng)用的開(kāi)發(fā)和部署,標(biāo)志著龍架構(gòu)軟件生態(tài)得到進(jìn)一步完善。

圖片

ONNX Runtime(ORT)是近年來(lái)興起的AI推理框架軟件,被大量AI應(yīng)用作為基礎(chǔ)AI推理引擎。ORT可支持PyTorch、Tensorflow、TFLite等多種格式的模型輸入,以及CPU、GPU、IoT、NPU、FPGA等多樣化算力后端。

在ONNX Runtime 社區(qū)1.17.0版本的研制過(guò)程中,龍芯中科技術(shù)團(tuán)隊(duì)與社區(qū)保持緊密合作,期間向ONNX Runtime社區(qū)代碼倉(cāng)庫(kù)提交了7697行代碼,對(duì)矩陣乘法、卷積、轉(zhuǎn)置等核心算子進(jìn)行深度向量?jī)?yōu)化。在社區(qū)支持下,龍架構(gòu)優(yōu)化代碼通過(guò)了檢視、測(cè)試驗(yàn)證等質(zhì)量保證流程,ONNX Runtime社區(qū)自1.17.0版本起正式實(shí)現(xiàn)對(duì)龍架構(gòu)的原生支持。 

未來(lái),龍芯中科將繼續(xù)與AI領(lǐng)域的國(guó)際開(kāi)源軟件社區(qū)攜手合作,助力AI領(lǐng)域的生態(tài)發(fā)展和技術(shù)創(chuàng)新,為用戶帶來(lái)更優(yōu)產(chǎn)品,實(shí)現(xiàn)更大價(jià)值。

原創(chuàng)文章,作者:陳晨,如若轉(zhuǎn)載,請(qǐng)注明出處:http://2079x.cn/article/636357.html

陳晨陳晨管理團(tuán)隊(duì)

相關(guān)推薦

發(fā)表回復(fù)

登錄后才能評(píng)論