深耕AI框架創新土壤 華為打造開放計算生態
當前,智慧化浪潮正驅動數字化進程進入新階段,開源成為推動科技創新、重塑全球數字格局的核心力量。特別在人工智慧領域,近年來,我國人工智慧開源生態從無到有、從小到大,體現出量質齊升的態勢,為開源框架創新生態的形成提供了必要支撐。
在人工智慧的技術體系中,AI框架是演算法應用和硬體算力之間的橋梁,處於“承上啟下”的位置。這一軟體根技術是AI應用創新的土壤,為下游技術和應用開發提供了活力保障。
在近日舉行的昇思人工智慧框架峰會上,中國科學院科技戰略諮詢研究院分享測算結果,在中國AI框架2024年新增市場中,昇思AI框架份額將達30%。同時,18家單位在會上發佈了基於昇思AI框架的原生開發大模型成果,這意味著AI框架生態已走深向實,加速融入千行百業。
彭紅華在會上致辭。主辦方供圖
華為ICT戰略與業務發展部總裁彭紅華在會上表示,華為一直堅持打造開放的計算産業生態,堅持根技術創新,與産業界共同打造堅實的、可持續的計算産業生態。
加速AI框架創新 夯實開源底座
作為整個人工智慧開發體系的核心力量,AI框架的創新發展十分重要,開源則為其提供了必要的生態環境保障。
中國人工智慧學會副理事長、中國工程院院士何友在會上表示,人工智慧産業需要開源開放的共用體系,發揮産學研的集體智慧,加速AI技術的不斷創新。
“昇思AI框架及開源社區在發展壯大的同時,持續引領技術創新。”何友説,這些創新項目覆蓋大模型孵化、科學研究、端側應用等多個技術方向,部分成果已經在金融、能源、製造、科研等行業發揮著重要價值,促進了相關領域的科技和産業發展。
據昇思MindSpore開源社區理事長丁誠介紹,昇思MindSpore自2020年開源以來,在社區活躍方面整體取得了近百倍的增長。開源版本已累計獲得1100萬次下載,3.7萬多名開發者參與社區貢獻,昇思與360多所高校科研院所展開教學及科研合作。
作為支援大模型創新的“孵化器”,昇思已原生適配了50多個大模型。丁誠表示,同時有1700多名社區夥伴採用昇思框架,累積孵化了超過2000個解決方案,在網際網路、金融、能源、交通等15個行業獲得了廣泛應用。
南向使能多樣化算力,北向孵化各類演算法模型,昇思作為自主創新的AI框架,在大模型時代的開源實踐顯得尤為重要。
在開源中國CTO劉東看來,昇思開源社區大大降低了人工智慧進入的門檻,讓更多的人快速參與到人工智慧的開發過程中,有助於行業積蓄創新要素,推動整個AI框架的發展。
參數量走向萬億級,序列長度迅速增長,模型結構走向多模態甚至全模態,模型計算過程從單模型單任務走向多模型多任務,深度學習和強化學習相融合……技術迭代加速演進,AI框架面臨前所未有的挑戰與機遇。
“人工智慧框架是AI時代的作業系統與軟體底座,領先的AI框架需要同時具備‘更高效、更敏捷、更開放’的技術與生態能力。”彭紅華説。
據了解,結合未來技術挑戰,昇思圍繞開發者編程體驗、大模型訓練及AI框架基礎能力,持續升級框架架構,使能AI模型未來創新。
丁誠介紹,在開發者編程體驗方面,昇思相容業界主流生態,提供一致開發體驗,持續降低遷移學習成本;在大模型訓練方面,提供更豐富的分佈式並行策略,結合自動搜索倣真調優,為大模型訓練節約端到端成本;在面向o1、AI4S未來場景,不斷優化框架架構,面向多模型多任務調度、深度學習+強化學習融合、邊訓練邊推理、函數式表達及編譯加速等方向持續演進,滿足創新訴求。
“華為將持續投入昇思MindSpore,堅持以開源的方式,向業界開放技術創新成果,攜手産業界客戶、夥伴和廣大開發者共促中國人工智慧框架生態健康、高速發展。”彭紅華説。
賦能産業升級 計算産業生態堅持“開放開源”
昇思生態的快速發展,是華為堅持根技術創新、持續打造開放的計算産業生態的一個縮影。
近年來,華為與産業界共同打造鯤鵬、昇騰計算産業生態,合作的“朋友圈”持續擴容。
在AI計算領域,昇騰深度開放多項能力,使能開發者構築競爭力的算子和加速庫。目前已有20多個客戶及夥伴基於昇騰和CANN原生開發了120多個核心算子,並廣泛應用於各類大模型。此外,針對模型及應用的開發部署場景,華為將成果開源開放給業界,共同加速大模型的創新與落地。
經歷5年發展,60多家硬體夥伴基於昇騰開發的硬體産品已經近千款,軟體夥伴從100多家發展到2000多家,聯合開發的4000多個解決方案應用於網際網路、金融、政府、電信、能源、交通、公共事業等行業核心業務場景。
開放的計算生態讓産業之間的發展更為緊密,越來越多的企業正走在與華為並肩共行的路上。
電力能源領域是專業大模型在行業應用的一個典型。南方電網公司戰略總監、規劃部總經理、科研院董事長鄭外生介紹,在新型電力系統下,超大的系統規模、海量的運作場景、高階數學模型和快速決策的要求,讓傳統倣真工具難以維繫。
“我們用昇思框架打造基於AI科學計算的‘馭電’電力系統智慧倣真器,能夠精準刻畫新型電力系統的安全邊界,解決新能源變化無常、難以計劃帶來的難題,提高了新能源的利用率。”鄭外生表示,在“馭電”大模型的開發過程中,南方電網應用昇思框架開發嵌入電力系統物理機制的一系列科學計算API,結合昇思多維混合併行能力優化後,靜態圖模式性能提升明顯。
通過建立科研與産業連接,促進成果轉化,華為計算“開源開放”的生態正驅動産業發展枝繁葉茂。
彭紅華表示,未來,昇思將繼續探索領域數據生態機制,建立領域高品質數據連接,以“演算法+數據”持續加速模型産業生態蓬勃發展。
“人工智慧産業正在加速變革,昇思將繼續與産業界、開發者和夥伴一起,開放合作,攜手致遠,共促人工智慧框架技術與生態發展,共築智慧時代軟體根基和開源生態。”彭紅華説。