5 月 15 日消息，科技媒體 marktechpost 昨日（5 月 14 日）發(fā)布博文，報(bào)道稱(chēng) Meta AI 旗下 FAIR 團(tuán)隊(duì)攜手佐治亞理工學(xué)院，合作開(kāi)發(fā) CATransformers 框架，將碳排放作為核心設(shè)計(jì)考量，通過(guò)聯(lián)合優(yōu)化模型架構(gòu)與硬件性能，顯著降低總碳足跡，為可持續(xù) AI 發(fā)展邁出重要一步。
機(jī)器學(xué)習(xí)技術(shù)的普及推動(dòng)了從推薦系統(tǒng)到自動(dòng)駕駛的革新，但其環(huán)境代價(jià)不容小覷。這些系統(tǒng)需要強(qiáng)大計(jì)算資源，常依賴(lài)定制硬件加速器運(yùn)行，訓(xùn)練和推理階段的高能耗直接導(dǎo)致運(yùn)營(yíng)碳排放攀升。
此外，硬件從制造到報(bào)廢的全生命周期也產(chǎn)生“隱含碳”，加劇生態(tài)負(fù)擔(dān)。隨著全球各行業(yè)加速采用 AI 技術(shù)，解決運(yùn)營(yíng)與隱含碳的雙重來(lái)源成為迫切需求。
當(dāng)前減排方法主要集中于提升運(yùn)營(yíng)效率，例如優(yōu)化訓(xùn)練和推理的能耗，或提高硬件利用率。但這些方法往往忽略硬件設(shè)計(jì)和制造階段的碳排放，未能整合模型設(shè)計(jì)與硬件效率的相互影響。
Meta 的 FAIR 團(tuán)隊(duì)與佐治亞理工學(xué)院聯(lián)合推出的 CATransformers 框架，將碳排放納入核心設(shè)計(jì)考量。該框架通過(guò)多目標(biāo)貝葉斯優(yōu)化引擎，聯(lián)合評(píng)估模型架構(gòu)與硬件加速器的性能，平衡延遲、能耗、精度和總碳足跡。
特別針對(duì)邊緣推理設(shè)備，CATransformers 通過(guò)剪枝大型 CLIP 模型生成變體，并結(jié)合硬件估算工具分析碳排放與性能。其成果 CarbonCLIP-S 與 TinyCLIP-39M 精度相當(dāng)，但碳排放降低 17%，延遲控制在 15 毫秒內(nèi)；CarbonCLIP-XS 則比 TinyCLIP-8M 精度提升 8%，碳排放減少 3%，延遲低于 10 毫秒。
研究顯示，單純優(yōu)化延遲的設(shè)計(jì)可能導(dǎo)致隱含碳增加高達(dá) 2.4 倍，而綜合優(yōu)化碳排放與延遲的策略可實(shí)現(xiàn) 19-20% 的總排放削減，且延遲損失極小。
CATransformers 通過(guò)嵌入環(huán)境指標(biāo)，為可持續(xù)機(jī)器學(xué)習(xí)系統(tǒng)設(shè)計(jì)奠定基礎(chǔ)。這表明，AI 開(kāi)發(fā)若從一開(kāi)始就結(jié)合硬件能力與碳影響考量，可實(shí)現(xiàn)性能與可持續(xù)性的雙贏(yíng)。隨著 AI 規(guī)模持續(xù)擴(kuò)大，該框架為行業(yè)提供了切實(shí)可行的減排路徑。
原創(chuàng)文章，作者：李小白，如若轉(zhuǎn)載，請(qǐng)注明出處：http://m.2079x.cn/article/719095.html
