3月28日，北京大學鯤鵬昇騰科教創(chuàng)新卓越中心特訓營在北京大學新燕園校區(qū)計算機大樓成功舉辦，本次特訓營旨在深入探討昇騰技術(shù)棧在大模型應用中的前沿技術(shù)，特別是基于北京大學自研SCOW平臺和華為昇騰的DeepSeek本地化部署與推理優(yōu)化，并通過實踐操作和技術(shù)專家面對面交流，進一步激發(fā)學生們的創(chuàng)新思維與學術(shù)視野。
深入解析：DeepSeek推理技術(shù)與昇騰平臺的融合
活動伊始，昇騰生態(tài)技術(shù)專家許濤就“DeepSeek-MoE模型技術(shù)演變分析”，深入解讀了DeepSeek系列模型技術(shù)演變。DeepSeek-MoE模型自推出以來不斷優(yōu)化，通過增加模型大小和專家數(shù)量，降低專家激活比，來提升性能，在架構(gòu)和訓練策略上持續(xù)創(chuàng)新。在技術(shù)實現(xiàn)方面，模型采用了多種優(yōu)化方法，如在訓練過程中，利用DualPipe雙向流水線方法減少通信開銷，根據(jù)不同的算子需求選擇合適精度計算，引入MTP方法，以多個Token作為監(jiān)督優(yōu)化模型。同時，昇騰已經(jīng)完成對Deepseek的適配，可以高效利用超節(jié)點內(nèi)的高速通信帶寬，有望在DeepSeek時代取得更好的發(fā)展。
（昇騰生態(tài)技術(shù)專家 許濤）
實踐分享：基于昇騰的DeepSeek全棧開源推理方案
北京大學聯(lián)合華為發(fā)布的DeepSeek全棧開源推理方案依托全棧開源組件構(gòu)建，基于北京大學自主研發(fā)的SCOW算力平臺系統(tǒng)，整合了DeepSeek、openEuler、MindSpore與vLLM/RAY等社區(qū)開源組件，通過開放協(xié)作打破技術(shù)壁壘，持續(xù)推動技術(shù)創(chuàng)新。北京大學計算中心工程師龍汀汀在特訓營中詳細介紹了該方案，現(xiàn)場演示了系統(tǒng)如何快速適應不同的AI框架，并展示其在多種應用場景下的高效性能。
（北京大學計算中心工程師 龍汀汀）
上手實操：邊緣設備上的昇騰技術(shù)實踐
在本次特訓營的開發(fā)實戰(zhàn)環(huán)節(jié)，學生們基于昇思MindSpore框架，在香橙派AI Pro開發(fā)板（20TOPS）上進行模型部署。值得一提的是，目前香橙派昇騰系列產(chǎn)品已經(jīng)率先完成了與 DeepSeek 模型的深度適配，利用開箱即用模型，讓邊緣離線部署變得輕松高效。通過實操，學生們親身感受到了昇騰無需依賴云端的強大算力，直接在邊緣設備上實現(xiàn)高性能計算及積木式開發(fā)，既保障了數(shù)據(jù)處理的隱私安全，又大幅提升了響應效率。這種“端側(cè)智能”的實戰(zhàn)體驗，不僅讓學習更直觀，更讓大家領(lǐng)略到AI落地應用的無限可能。
（北京大學學生現(xiàn)場實操香橙派AI Pro開發(fā)板）
開放討論：技術(shù)專家與學者面對面答疑
在活動的最后，學生們與華為計算戰(zhàn)略規(guī)劃專家、北京大學計算中心工程師、AI安全解決方案專家、昇騰生態(tài)技術(shù)專家們一起進行了面對面的互動，從鯤鵬昇騰設備使用到技術(shù)難題再到未來發(fā)展趨勢，涵蓋諸多領(lǐng)域。在算子開發(fā)與適配方面，學生們提出的問題得到了專家們細致且富有前瞻性的解答。關(guān)于自定義算子綁定復雜、編譯耗時的問題，專家們表示除了相關(guān)QA文檔資源會隨商業(yè)版本盡快發(fā)布外，也可直接咨詢?nèi)A為研發(fā)專家加速問題解決。同時歡迎高校師生將自身解決問題的過程發(fā)布為案例教程，這些無疑為學生們后續(xù)的開發(fā)工作提供了有力支持。對于開源編譯器支持的疑問，專家們詳細介紹了相關(guān)接口的開源情況以及正在推進的研發(fā)工作，讓學生們了解到未來算子開發(fā)將更加簡化，這極大地激發(fā)了學生們探索新技術(shù)的熱情。
硬件性能與生態(tài)建設也是互動的焦點。學生們關(guān)心的端側(cè)異構(gòu)模型部署問題，專家深入淺出地講解了華為在這方面的布局和技術(shù)優(yōu)勢。他們提到，華為在端側(cè)NPU和GPU的協(xié)同工作上有著長遠的規(guī)劃，并且在泛邊緣或泛端場景下，軟件體系的通用性為開發(fā)者提供了更為廣闊的發(fā)展空間，這讓學生們認識到華為計算生態(tài)的潛力，也為他們未來的研究方向提供了新的思路。
（開放交流環(huán)節(jié) 專家學者與學生們互動）
本次特訓營的圓滿舉辦是北京大學鯤鵬昇騰科教創(chuàng)新卓越中心在AI技術(shù)創(chuàng)新和人才培養(yǎng)方面的一次成功實踐。北京大學鯤鵬昇騰科教創(chuàng)新卓越中心自成立以來，致力于構(gòu)建基于鯤鵬昇騰技術(shù)路線的校級生態(tài)合作平臺，圍繞大學計算產(chǎn)業(yè)前沿課題研究、課程體系建設、研究人才培養(yǎng)等方面展開合作，為產(chǎn)業(yè)輸出高質(zhì)量鯤鵬昇騰創(chuàng)新人才，孵化和培育根植中國的世界級科研創(chuàng)新成果。未來，鯤鵬昇騰科教創(chuàng)新卓越中心將繼續(xù)開展一系列針對高校師生的培訓活動，幫助他們在科研創(chuàng)新與技術(shù)應用中取得更好的成果，推動人工智能技術(shù)的進步與產(chǎn)業(yè)的發(fā)展。
關(guān)鍵詞：
