飞象网 - 通信人每天必上的网站

首頁|必讀|視頻|專訪|運營|制造|監管|大數據|物聯網|量子|元宇宙|博客|特約記者
手機|互聯網|IT|5G|光通信|人工智能|云計算|芯片|報告|智慧城市|移動互聯網|會展
首頁 >> 頭條資訊 >> 正文

千錘百煉 九天大模型是怎樣煉成的?

2024年6月3日 15:12  CCTIME飛象網  

飛象網訊 (一飛/文)在福建,瑕疵AI視覺檢測系統賦能紡織企業開展AI視覺識別檢測,有效提升產品質量和生產效率;在河南,精準高效的農業專用AI解決方案為農戶提供便捷高效的農業知識問答服務;在黑龍江,龍江政務服務依托九天海算政務大模型,實現“一網通辦、一網統管、一網協同”……

“九天”人工智能基座的神秘面紗在數字中國建設峰會中國移動人工智能大會上被揭開,“九天”不僅是一個技術創新的里程碑,更是助推經濟社會高質量發展的強大引擎,由萬卡級智算集群鑄就堅實根基,千億多模態大模型構建豐富內涵,匯聚百大要素的生態平臺成就了其廣闊視野與無限可能,為數字經濟的蓬勃發展注入了強大動力。

“九天”亮劍,實現跨越式發展

“可上九天攬月,可下五洋捉鱉”。中國移動始終與國家的發展脈搏同頻共振,自2013年起便踏上了與人工智能深度融合的探索之路,打造了全力投身人工智能技術創新和產品研發的“九天”團隊,致力于將人工智能技術融入其核心業務,推動行業的智能化發展。

中國移動“九天”團隊從智能客服領域入手,助力10086客服成為全球交互量最大的智能客服系統;又在大數據智能領域深入攻關,助力多個省公司顯著提升了營銷效益。

為進一步加快人工智能的廣泛創新,中國移動2017年正式上線了“九天”人工智能平臺。

該平臺是國內首個運營商自主研發的人工智能平臺,可助力人工智能開發者們充分利用中國移動在算力、數據等技術資源的規模化優勢而敏捷、高效地實現豐富多樣的人工智能算法、應用,并加速這些成果在中國移動豐富的應用場景中得到落地。

“面向通用人工智能的‘人工智能大平臺’,其能力底座是大模型。”九天基礎大模型研發負責人表示,AI給整個行業帶來了革命性的變化,所有從事這個行業的人都會非常期待。“我相信智能化會深入到生產生活、社會治理、科學研究等方方面面,我相信它一定會讓我們整個文明上升一個臺階。”

拾級而上,攻堅難題鍛長板

隨著科技的飛速發展,人工智能已成為引領數字化轉型的重要力量。2023年3月,中國移動成立大模型研發團隊,攻關通用人工智能技術,搶占科技制高點。

大模型的訓推技術是一個新的方向,在全球任何一家公司都是核心機密,公開的學術論文只能窺看到冰山之一角,但這些已經是研發團隊獲取訓練技術的最佳途徑。

在九天基礎大模型研發工作中,研究人員很多時候要摸著石頭過河,甚至要勇闖技術“無人區”,日夜不輟地提煉技術要點,為大模型攻關積累了知識底座,結合訓練過程,形成了完整的訓練日志,成為了大模型攻關過程中最寶貴的知識財富。

“眾人拾柴火焰高”,沒有現成標準可遵循、沒有成熟經驗可借鑒,在這種情況下,研發團隊在多方渠道收集了近500萬億字符的原始文本數據,其規模近乎覆蓋了人類有史以來全量的文本類知識。他們對這些數據進行一輪又一輪的精洗和去重,優選的比例是100:1,打造出近5萬億字符的高質量訓練數據集,為大模型訓練奠定了數據基礎。

最開始的半年時間里,算力不足、平臺的斷點續訓功能也未開發完成,研發團隊24小時日夜監控千卡集群的訓練狀態,第一時間處理故障、恢復訓練任務。但因為對模型的超參數設置把握火候不夠,訓練一次次歸零,一次次從頭再來。在挫折面前,他們展現出極強的韌性和抗壓能力,堅守一線,直到模型最終收斂出完美的曲線。

新技術要敢于在實際的生產中錘煉。在大模型訓練過程中,對于高性能算力資源面臨著嚴重的“卡脖子”問題,相應的框架、加速技術等也難以直接使用,亟需實現全鏈路高度自主可控的大模型訓練。

現在九天語言大模型已實現在近萬卡集群上進行訓練,速度達130T Flops,無故障訓練時長在同等規模芯片訓練中達到國際領先水平,已與中石油、中航信、中化等央企建立合作,加速產業賦能。

積力所舉,則無不勝;眾智所為,則無不成。中國移動將與產業一道,不斷建強“九天”人工智能基座,立足于在重點領域形成創新突破,推進AI在通信服務領域的創新發展及落地應用,帶動我國大模型產業生態融通共贏。

編 輯:霏雯
聲明:刊載本文目的在于傳播更多行業信息,本站只提供參考并不構成任何投資及應用建議。如網站內容涉及作品版權和其它問題,請在30日內與本網聯系,我們將在第一時間刪除內容。本站聯系電話為86-010-87765777,郵件后綴為#cctime.com,冒充本站員工以任何其他聯系方式,進行的“內容核實”、“商務聯系”等行為,均不能代表本站。本站擁有對此聲明的最終解釋權。
相關新聞              
 
人物
中國電信董事長柯瑞文:天翼云作為國家云已經越過向智能云發展的拐點
精彩專題
CES 2024國際消費電子展
2023年信息通信產業盤點暨頒獎禮
飛象網2023年手機評選
第24屆中國國際光電博覽會
CCTIME推薦
關于我們 | 廣告報價 | 聯系我們 | 隱私聲明 | 本站地圖
CCTIME飛象網 CopyRight © 2007-2024 By CCTIME.COM
京ICP備08004280號-1  電信與信息服務業務經營許可證080234號 京公網安備110105000771號
公司名稱: 北京飛象互動文化傳媒有限公司
未經書面許可,禁止轉載、摘編、復制、鏡像
主站蜘蛛池模板: 皮带机-带式输送机价格-固定式胶带机生产厂家-河南坤威机械 | 【德信自动化】点胶机_全自动点胶机_自动点胶机厂家_塑料热压机_自动螺丝机-深圳市德信自动化设备有限公司 | 阁楼货架_阁楼平台_仓库仓储设备_重型货架_广州金铁牛货架厂 | 大型多片锯,圆木多片锯,方木多片锯,板材多片锯-祥富机械有限公司 | 浙江工业冷却塔-菱电冷却塔厂家 - 浙江菱电冷却设备有限公司 | 上海诺狮景观规划设计有限公司| 西门子伺服控制器维修-伺服驱动放大器-828D数控机床维修-上海涌迪 | 沈阳缠绕包装机厂家直销-沈阳海鹞托盘缠绕包装机价格 | 破碎机锤头_合金耐磨锤头_郑州宇耐机械工程技术有限公司 | 捷码低代码平台 - 3D数字孪生_大数据可视化开发平台「免费体验」 | 超细粉碎机|超微气流磨|气流分级机|粉体改性设备|超微粉碎设备-山东埃尔派粉碎机厂家 | 氧化锆陶瓷_氧化锆陶瓷加工_氧化锆陶瓷生产厂家-康柏工业陶瓷有限公司 | 天津热油泵_管道泵_天津高温热油泵-天津市金丰泰机械泵业有限公司【官方网站】 | 济南ISO9000认证咨询代理公司,ISO9001认证,CMA实验室认证,ISO/TS16949认证,服务体系认证,资产管理体系认证,SC食品生产许可证- 济南创远企业管理咨询有限公司 郑州电线电缆厂家-防火|低压|低烟无卤电缆-河南明星电缆 | 生态板-实木生态板-生态板厂家-源木原作生态板品牌-深圳市方舟木业有限公司 | 日本细胞免疫疗法_肿瘤免疫治疗_NK细胞疗法 - 免疫密码 | 一路商机网-品牌招商加盟优选平台-加盟店排行榜平台 | 蓝牙音频分析仪-多功能-四通道-八通道音频分析仪-东莞市奥普新音频技术有限公司 | T恤衫定做,企业文化衫制作订做,广告T恤POLO衫定制厂家[源头工厂]-【汉诚T恤定制网】 | 丹尼克尔拧紧枪_自动送钉机_智能电批_柔性振动盘_螺丝供料器品牌 | 耐高温风管_耐高温软管_食品级软管_吸尘管_钢丝软管_卫生级软管_塑料波纹管-东莞市鑫翔宇软管有限公司 | 合肥卓创建筑装饰,专业办公室装饰、商业空间装修与设计。 | FAG轴承,苏州FAG轴承,德国FAG轴承-恩梯必传动设备(苏州)有限公司 | 砂尘试验箱_淋雨试验房_冰水冲击试验箱_IPX9K淋雨试验箱_广州岳信试验设备有限公司 | 电伴热系统施工_仪表电伴热保温箱厂家_沃安电伴热管缆工业技术(济南)有限公司 | uv机-uv灯-uvled光固化机-生产厂家-蓝盾机电 | 螺杆泵_中成泵业| 并网柜,汇流箱,电控设备,中高低压开关柜,电气电力成套设备,PLC控制设备订制厂家,江苏昌伟业新能源科技有限公司 | 碳化硅,氮化硅,冰晶石,绢云母,氟化铝,白刚玉,棕刚玉,石墨,铝粉,铁粉,金属硅粉,金属铝粉,氧化铝粉,硅微粉,蓝晶石,红柱石,莫来石,粉煤灰,三聚磷酸钠,六偏磷酸钠,硫酸镁-皓泉新材料 | 东莞精密模具加工,精密连接器模具零件,自動機零件,冶工具加工-益久精密 | 365文案网_全网创意文案句子素材站 | 亚克力制品定制,上海嘉定有机玻璃加工制作生产厂家—官网 | 防潮防水通风密闭门源头实力厂家 - 北京酷思帝克门窗 | 沈阳缠绕包装机厂家直销-沈阳海鹞托盘缠绕包装机价格 | 安徽控制器-合肥船用空调控制器-合肥家电控制器-合肥迅驰电子厂 安徽净化板_合肥岩棉板厂家_玻镁板厂家_安徽科艺美洁净科技有限公司 | 纳米涂料品牌 防雾抗污纳米陶瓷涂料厂家_虹瓷科技 | 橡胶接头|可曲挠橡胶接头|橡胶软接头安装使用教程-上海松夏官方网站 | 硬度计_影像测量仪_维氏硬度计_佛山市精测计量仪器设备有限公司厂家 | 特材真空腔体_哈氏合金/镍基合金/纯镍腔体-无锡国德机械制造有限公司 | 电动葫芦|环链电动葫芦-北京凌鹰名优起重葫芦| 针焰试验仪,灼热丝试验仪,漏电起痕试验仪,水平垂直燃烧试验仪 - 苏州亚诺天下仪器有限公司 |