日日爽天天操,国产精品亚洲成人,亚洲天堂五月,亚洲日韩欧美一区二区在线,麻豆精品国产免费,特级毛片a级毛片100免费,亚洲www.

中國企業報集團主管主辦

中國企業信息交流平臺

微博 微信

天翼云大模型訓推一體化服務能力升級,加速AI應用創新與落地

2024-09-04 16:07 來源:中國企業網 次閱讀
 
天翼云大模型訓推一體化服務能力升級,加速AI應用創新與落地

9月4日,“天翼云息壤——大模型訓推一體化服務能力升級”線上發布會成功舉辦。會上,息壤平臺訓推服務能力重磅升級,新增閉源、多模態基座大模型以及數據集,支持萬卡規模訓練,訓練穩定性再次提升,新增體驗空間,為基礎大模型訓練、行業大模型訓推提供一站式解決方案。天翼云多位專家與合作伙伴代表發表精彩演講,共探人工智能大模型的發展趨勢與挑戰,并對平臺升級后的能力與優勢,以及在醫療領域的賦能實踐進行了深度解讀。

202409041544241874579752.png

平臺全新升級,提供穩定高效的大模型訓推一體化服務

我國大模型已進入快速發展階段,但大模型的研發與推廣仍然面臨一定的壓力和挑戰,呈現出“基礎豐富,應用不足”的特點。一方面,大模型的訓練和應用需要大量的高質量數據,當前我國數據資源有限且分散,導致模型訓練效果并不理想;另一方面,模型的參數量和計算復雜度持續增加,對算力的需求以幾何級數增長。行業亟需更加高效、集約化的智算平臺的支撐,以驅動國產大模型高質量發展與產業化應用。

天翼云智算產品線總監張安發表示,升級后的平臺專為應對大參數大模型、行業模型應用所帶來的挑戰而設計,它提供了一個全棧式的服務,旨在簡化大模型從訓練到部署的整個流程。平臺新增了開閉源大模型、多模態大模型,供用戶靈活選擇,模型數量處于國內領先水平;新增上線專業的大模型數據集,用戶可直接將數據用于大模型訓練、推理任務中,實現了算法、算力、數據三要素的融合;新增體驗中心,用戶可直接在線互動體驗;打造了全鏈路故障感知和恢復、全鏈路日志監控工具,突破斷點續訓等核心技術,使全鏈路監控訓練更穩定。

202409041544251073493662.jpg

隨著模型參數量從千億邁向萬億,大模型對底層算力的訴求進一步升級,萬卡甚至超萬卡集群已經成為大模型產業發展的剛需,同時對訓練穩定性要求極高。根據公開報道,Llama3.1-405B原生訓練耗時持續54天,累計發生419次故障,平均每3小時產生一次。天翼云智算產品線專家范順國介紹,天翼云訓推服務平臺是國內首個實現公有云國產化萬卡訓練的平臺,能夠為萬億參數級別大模型訓練提供一體化方案。天翼云在北京萬卡池完成了Llama3-405B(4000億參數)大模型的訓練,700億參數模型Llama2-70B在萬卡規模下順利拉起并完成訓練,MFU達到43%,在業界達到了領先水平。天翼云優化斷點續訓技術,在Llama2-70B模型訓練中,實現秒級故障檢測,分鐘級定位并處理故障,分鐘級訓練恢復,這一性能已達到行業前沿水平。

20240904154425110207839.jpg

此外,基于平臺能力,天翼云聯合伙伴上線了魔樂(Modelers)開發者社區,通過整合優質中文AI資源、提供極致易用的工具鏈,以及國產化算力使能,端到端支持AI應用開發全流程,助力孵化國產原生模型。

三種交付形態+兩大應用場景,助力企業加速AI應用落地

AI技術加速融入各行各業,大模型的應用前景也愈加廣闊。天翼云息壤一體化智算服務平臺從行業及客戶需求出發,在技術與能力的不斷迭代升級中使能企業制勝AI時代。

天翼云智算產品線專家夏曼雪對平臺功能進行了詳細演示。平臺支持公有云、混合云和輕量化三種交付形態。其中,公有云版本即開即用、計費靈活,支持按卡時計費、包周期計費;混合云版本支持千卡規模的私有化項目交付;輕量化版本支持天翼云A100云主機、H800/A100/A800/A10裸金屬服務器、物理機等硬件形態交付部署,靈活便捷。

20240904154425922749776.jpg

場景應用方面,平臺主要面向兩類客戶場景。一是具備深厚行業知識、擁有自主數據的行業客戶,如政務、金融機構、汽車、媒體、旅游等行業。依托零代碼平臺和豐富的開閉源大模型,客戶無需掌握算法編程即可完成模型的調優和API調用,從而加速大模型從概念到落地的進程。二是擁有很強的算法能力,但在智算集群的管理運維方面經驗不足的大模型廠商。平臺為這類用戶提供專業的開發和運維工具,實現大規模分布式訓練和斷點續訓能力,在保障穩定性的同時,通過構建AI加速引擎助力用戶提升算力利用率。

目前,天翼云已服務多個客戶的訓推場景,助力行業大模型訓推更便捷、更高效、更穩定安全。中國中醫科學院中醫藥信息研究所(簡稱“中醫藥信息研究所”)所長特聘助理朱彥分享了與天翼云合作開展中醫藥大模型的探究與實踐,通過與天翼云合作,中醫藥信息研究所獲得了更加穩定和高效的計算支持。借助天翼云大模型學習機,搭建低代碼服務平臺,中醫藥信息研究所高效完成了文獻和臨床數據的治理工作,包括自動抽取、標準化等任務。此外,在中醫垂類大模型的微調、應用發布方面,平臺將提供算法支持和模型優化工具,幫助客戶充分挖掘中醫藥數據的內在價值。雙方合作與探索,不僅進一步加速了中醫大模型的研究和應用,以及中醫藥的現代化進程,也將為全球健康事業的發展作出重要貢獻。

20240904154426802676253.jpg

伴隨以大模型為核心的人工智能技術的快速發展,各行各業正經歷著一場前所未有的智能化轉型浪潮。作為云服務國家隊,天翼云將持續聚焦人工智能場景進行技術創新,積極加碼布局智算基礎設施,賦能企業跑出“AI加速度”,攜手合作伙伴共同推動經濟社會智能化水平邁向新高度。

點贊()
上一條:持續夯實國云智算底座,天翼云息壤升級發布會倒計時1天!2024-09-03
下一條:青島國際通信業務出入口局啟動2024-09-06

相關稿件

智能網聯汽車“車路云一體化”應用試點城市名單公布 2024-07-04
20個城市入選智能網聯汽車 “車路云一體化”應用試點 2024-07-10
為用戶提供家電家居一體化服務!三翼鳥西安店開業 2024-07-27
首批試點城市公布 東軟助推“車路云一體化”場景落地 2024-07-05
全面升級!天翼云重磅打造五位一體智算云能力體系 2024-05-25
國務院國有資產管理委員會 中國企業聯合會 中國企業報 中國社會經濟網 中國國際電子商務網 新浪財經 鳳凰財經 中國報告基地 企業社會責任中國網 杭州網 中國產經新聞網 環球企業家 華北新聞網 和諧中國網 天機網 中貿網 湖南經濟新聞網 翼牛網 東莞二手房 中國經濟網 中國企業網黃金展位頻道 硅谷網 東方經濟網 華訊財經 網站目錄 全景網 中南網 美通社 大佳網 火爆網 跨考研招網 當代金融家雜志 借貸撮合網 大公財經 誠搜網 中國鋼鐵現貨網 證券之星 融易在線 2014世界杯 中華魂網 納稅人俱樂部 慧業網 商界網 品牌家 中國國資報道 金融界 中國農業新聞網 中國招商聯盟 和訊股票 經濟網 中國數據分析行業網 中國報道網 九州新聞網 投資界 北京科技創新企業誠信聯盟網 中國白銀網 炣燃科技 中企媒資網 中國石油化工集團 中國保利集團公司 東風汽車公司 中國化工集團公司 中國電信集團公司 華為技術有限公司 廈門銀鷺食品有限公司 中國恒天集團有限公司 濱州東方地毯集團有限公司 大唐電信科技股份有限公司 中國誠通控股集團有限公司 喜來健醫療器械有限公司 中國能源建設股份有限公司 內蒙古伊利實業集團股份有限公司 中國移動通信集團公司 中國化工集團公司 貴州茅臺酒股份有限公司