據來自安徽省量子計算工程研究中心的消息,近日,本源量子、合肥綜合性國家科學中心人工智能研究院等機構聯合攻關,在中國第三代自主超導量子計算機“本源悟空”真機上,首次運行十億參數AI大模型微調任務。實驗結果顯示,在參數量減少76%的前提下,訓練效果反而提升8.4%。這一成果不僅驗證了量子計算助力實現大模型輕量化的可行性,更為破解大模型“算力焦慮”開辟了新路徑。
微調是指在通用大模型的基礎上,通過進一步訓練特定領域數據,使其適應醫療診斷、金融風控等專業場景。傳統低秩微調面臨性能瓶頸、泛化能力有限等問題,量子計算憑借其疊加態和糾纏態特性可同時探索海量參數組合,提升大模型微調的效率。
據介紹,“本源悟空”是目前我國先進的可編程、已交付超導量子計算機,已為全球139個國家超2300萬人次提供量子算力云服務。(啟源 楊夏)
轉自:中國知識產權報
【版權及免責聲明】凡本網所屬版權作品,轉載時須獲得授權并注明來源“中國產業經濟信息網”,違者本網將保留追究其相關法律責任的權力。凡轉載文章及企業宣傳資訊,僅代表作者個人觀點,不代表本網觀點和立場。版權事宜請聯系:010-65363056。
延伸閱讀