2021年8月23日下午，昇騰和鵬城實驗室在深圳聯合舉辦AI大模型應用研討會圓滿落幕。本次會議旨在連接鵬城實驗室與深圳人工智能企業，共同探討大模型在行業場景的落地，加強深圳本地產、學、研、用緊密結合，探索未來更多可能。

本次研討會邀請來自科研機構和企業的多位人工智能專家到場，包括鵬城實驗室網絡智能研究部副主任兼云腦研究所所長田永鴻、鵬城實驗室視覺智能研究所所長王耀威、中山大學數據科學與計算機學院教授鄭偉詩、華南理工大學軟件學院教授譚明奎、IDEA研究院講席科學家張家興，華為昇騰計算MindSpore開源框架和生態產品總監田昆陽，昇騰MindSpore首席架構師應江勇等。此外，平安科技、招商銀行，云天勵飛、極視角，追一科技、優必選、北科瑞聲、華安泰等企業，也派出了首席科學家、AI算法負責人等高級技術專家參會，共同探討AI大模型如何在行業落地。

田永鴻在開幕致辭中指出，當前AI發展到一個新型階段，雖然離通用人工智能仍有一段距離，但得益于大模型的大參數量，模型的表達能力得到了較大提升，大模型在科研和產業中發揮的作用越來越大。鵬城實驗室持續在NLP、CV大模型的研究上投入，大模型系列科研成果以開源的方式提供給企業，為廣大人工智能企業提供AI技術源動力。希望在本次研討會中，激發更多創新火花，共同推進大模型在行業應用的落地。

田昆陽表示，深度學習從2012年開始進入快速發展階段，目前模型參數量表現出激增趨勢。這意味著大模型在傳統模型無法解決的問題領域有其獨特的價值。大模型的泛化能力和小型化方法，是大模型在行業應用落地的關鍵。華為希望基于昇騰+MindSpore的人工智能基礎軟硬件平臺，攜手廣大科研機構和企業，共同探索未來人工智能更多的可能。

隨后，就大模型的最新研究進展，與會專家進行了專題分享。鵬城實驗室網絡智能部開源所研究員王暉介紹了鵬城實驗室發布的業界首個全開源2000億參數中文預訓練語言模型——鵬程·盤古。鵬程·盤古模型采用自回歸預訓練語言模型（ALM），具有良好的泛化的能力。鵬程·盤古模型應用了MindSpore AI計算框架的多維度混合自動并行技術，充分發揮鵬城云腦II AI計算集群的E級算力，在千卡級的規模下完成高效分布式訓練。王暉老師在現場也介紹了鵬程·盤古模型的開源情況、使用方法和應用場景。除了傳統NLP場景，如對話機器人、寫作助手、多語翻譯、知識問答、專利輔助生成等，也有學者將鵬程·盤古應用歌詞創作等科學+藝術的跨界應用領域。

鵬城實驗室CV大模型聯合團隊的主要成員，中山大學鄭偉詩教授和華南理工大學譚明奎教授對鵬城實驗室機器視覺大模型的研究規劃和進展進行了介紹，并且針對大模型落地難，介紹了大模型遷移部署的研究進展。鵬城CV大模型計劃以CNN+Transformer技術路線，構建面向智能交通、智慧社區、智慧園區等場景的AI基礎能力。CV大模型的出現，將會改變當前針對中長尾場景定制模型的局面。大模型參數規模越來越大，部署越來越難，對此聯合團隊介紹了基于特征流數據訓練下游任務、大模型蒸餾、使用輔助數據生成與模型蒸餾等方法，希望以此逐步克服大模型部署難的痛點。

此外，華為昇騰MindSpore首席架構師應江勇，介紹了國內外相關企業在大模型應用和商業探索的洞察，引發了在場同行的關注。從國內外多家頂級人工智能企業的案例可以看到，得益于大模型的參數容量龐大，帶來更好的學習能力，大模型在主流數據集場景上收斂效果優于小模型。多模態融合也是大模型的發展方向，兩模態已經成為當前大模型競爭的焦點，三模態模型也逐步出現。

在此之后，昇騰開源社區運營總監黃之鵬，以Huggingface為例對大模型的發展趨勢和應用展望做了深入淺出的洞察分享。Huggingface作為初創企業，在線上模型倉中收集了多個預訓練模型，以預訓練模型套件的方式向用戶開放。如果未來在預訓練模型和下游任務之間，形成一套可被廣泛接受的套件標準，會對擴大AI在行業應用的落地大有裨益。

在開放研討環節，來自華安泰、追一、北科瑞聲、優必選、平安科技、極視角等企業的主管和專家，根據自身所處的行業發表了對大模型應用的觀點和看法。與會專家都充分認可大模型的演進趨勢，對大模型和各自應用場景的結合進行了展望，同時也對大模型的落地提出了具體的問題，如大模型的資源消耗，大模型的數據量以及大模型如何進行蒸餾，大模型是否會帶來成本提升等，與會專家們進行了深入的討論。在討論的最后，IDEA認知計算與自然語言講席科學家張家興，對企業應用大模型的關鍵訴求作出了歸納，一是要降低大模型的開發成本，二是要降低大模型部署的成本，獲得了企業同行的認可。

在研討會的最后，由華為昇騰聯合發起，旨在聯接全國核心開發者并輻射全國廣大開發者的開放社區組織——HAG（HUAWEI Ascend Group）大模型興趣小組正式啟動，通過與啟智社區聯動的線上線下活動，打造開放、自由的昇騰開發者社區圈層，吸納商業伙伴，構建圈層體系，共建技術生態。

目前HAG涵蓋的活動內容有：前沿技術分享、大模型技術解讀、最新應用體驗、優秀應用展示、開發者大賽等，小組成員可根據自身需求參與活動。同時，華為昇騰將提供一系列支持，如活動資金、活動物料、華為專家、算力、宣傳渠道等，促進HAG成員們融入組織，展示風采，創造更多價值。