近日,知名AI推理框架開源社區(qū)ONNX Runtime正式發(fā)布支持龍架構的版本1.17.0。今后,用戶可以直接使用ONNX Runtime開源社區(qū)發(fā)布的版本在龍芯平臺完成AI推理類應用的開發(fā)和部署,標志著龍架構軟件生態(tài)得到進一步完善。

ONNX Runtime(ORT)是近年來興起的AI推理框架軟件,被大量AI應用作為基礎AI推理引擎。ORT可支持PyTorch、Tensorflow、TFLite等多種格式的模型輸入,以及CPU、GPU、IoT、NPU、FPGA等多樣化算力后端。
在ONNX Runtime 社區(qū)1.17.0版本的研制過程中,龍芯中科技術團隊與社區(qū)保持緊密合作,期間向ONNX Runtime社區(qū)代碼倉庫提交了7697行代碼,對矩陣乘法、卷積、轉置等核心算子進行深度向量優(yōu)化。在社區(qū)支持下,龍架構優(yōu)化代碼通過了檢視、測試驗證等質量保證流程,ONNX Runtime社區(qū)自1.17.0版本起正式實現(xiàn)對龍架構的原生支持。
未來,龍芯中科將繼續(xù)與AI領域的國際開源軟件社區(qū)攜手合作,助力AI領域的生態(tài)發(fā)展和技術創(chuàng)新,為用戶帶來更優(yōu)產(chǎn)品,實現(xiàn)更大價值。
原創(chuàng)文章,作者:陳晨,如若轉載,請注明出處:http://m.2079x.cn/article/636357.html