飞象网 - 通信人每天必上的网站

首頁|必讀|視頻|專訪|運營|制造|監(jiān)管|大數(shù)據(jù)|物聯(lián)網(wǎng)|量子|低空經(jīng)濟|智能汽車|特約記者
手機|互聯(lián)網(wǎng)|IT|5G|光通信|人工智能|云計算|芯片|報告|智慧城市|移動互聯(lián)網(wǎng)|會展
首頁 >> 人工智能 >> 正文

智庫觀點:解碼DeepSeek

2025年2月10日 07:35  中移智庫  

2025年春節(jié)期間,DeepSeek爆火出圈,發(fā)布開源大模型,在數(shù)學(xué)、代碼、自然語言推理等任務(wù)上表現(xiàn)追平OpenAI,在美國對我國AI產(chǎn)業(yè)鏈全方位打壓遏制的背景下,成功走出了一條低成本、高性能、國產(chǎn)化“突圍之路”并震驚世界,為加速國產(chǎn)AI大模型降本提效、生態(tài)繁榮注入了強大動力。

出圈情況

DeepSeek憑借“低成本+高性能”模型全球破圈。DeepSeek早前發(fā)布的V3模型每訓(xùn)練1萬億tokens僅需在2048塊H800 GPU集群上耗時3.7天,總計278萬 GPU小時、557.6萬美元的訓(xùn)練成本,約為GPT-o1的1/20、Llama 3.1的1/10。

新發(fā)布的R1模型API服務(wù)價格為每百萬輸入tokens 1-4元、每百萬輸出tokens 16元,遠低于同期 OpenAI o1 API定價水平,且在邏輯、數(shù)學(xué)及中文任務(wù)中表現(xiàn)優(yōu)異。DeepSeek應(yīng)用程序霸榜蘋果應(yīng)用商店第一名,獲全球主流公有云公司平臺接入。

成功原因

DeepSeek通過較少算力實現(xiàn)高性能模型表現(xiàn),主要通過算法創(chuàng)新和工程優(yōu)化等方式大幅提升模型效率。一是成功走通“純”強化學(xué)習(xí)(RL)路徑。DeepSeek-R1拋開以預(yù)設(shè)思維鏈模板和監(jiān)督式微調(diào)等為特點的AI推理能力傳統(tǒng)訓(xùn)練方法,僅依靠簡單的獎懲信號來指導(dǎo)優(yōu)化模型行為,不僅省去了SFT和復(fù)雜的獎懲模型對計算資源的需求,還促使模型以“頓悟”的形式學(xué)會思考。二是實現(xiàn)算法、框架和硬件的優(yōu)化協(xié)同。為大幅減少內(nèi)存占用和計算量,DeepSeek系列模型在算法層面引入專家混合模型、多頭隱式注意力、多token預(yù)測,框架層面實現(xiàn)FP8混合精度訓(xùn)練,硬件層面采用優(yōu)化的流水線并行策略,同時高效配置專家分發(fā)與跨節(jié)點通信,實現(xiàn)最優(yōu)效率配置和資源節(jié)約。

DeepSeek具有擁抱AI的創(chuàng)始基因豐富的算力資源儲備、極具天賦的本土人才團隊。一是自帶AI創(chuàng)始基因。創(chuàng)始人梁文鋒畢業(yè)于浙江大學(xué)電子信息工程和計算機科學(xué)專業(yè),早年創(chuàng)立對沖基金“幻方量化”,實現(xiàn)投資策略全面AI化,2023年5月成立深度求索,聚焦發(fā)展通用人工智能。二是豐富的算力資源儲備。幻方量化曾投資超過10億元,先后研發(fā)了AI超級計算機“螢火一號”和“螢火二號”。其中,“螢火二號”搭載了約1萬張英偉達A100顯卡。三是極具天賦的本土人才團隊。DeepSeek團隊工程師和研發(fā)人員幾乎都來自清華大學(xué)、北京大學(xué)、中山大學(xué)、北京郵電大學(xué)等國內(nèi)頂尖高校,鮮有“海歸”,以走出校園不久的博士為主,也有部分成員有英偉達、微軟等國外企業(yè)工作或?qū)嵙?xí)經(jīng)歷。

產(chǎn)業(yè)影響

一是DeepSeek打破大模型發(fā)展路徑依賴,基本確立了符合中國實際的AI發(fā)展道路。DeepSeek 打破了 AI 大模型發(fā)展對算力和標注數(shù)據(jù)的高度依賴,展示了通過改進模型架構(gòu)和訓(xùn)練方法,以較少的數(shù)據(jù)標注量和算力消耗提升模型推理能力的可行性,標志著我國在硬件上長期存在代際差距的情況下,可采取軟硬協(xié)同方式實現(xiàn)對海外頂尖大模型的性能追趕和成本領(lǐng)先。

二是DeepSeek提升行業(yè)對模型的后訓(xùn)練和推理需求,長期提振算力需求。DeepSeek R1在 V3 的基礎(chǔ)上進行了兩次強化學(xué)習(xí),明顯提升了訓(xùn)練的探索時間和推理思考時間,將在后訓(xùn)練階段延續(xù)Scaling Law法則。隨著高性能低成本模型的出現(xiàn)將大幅降低國內(nèi)AI賦能千行百業(yè)的應(yīng)用開發(fā)門檻,推動AI產(chǎn)業(yè)鏈從“訓(xùn)練驅(qū)動”向“推理驅(qū)動”轉(zhuǎn)變,帶動推理算力需求加速釋放。

三是DeepSeek以模型開源推動AI平權(quán),開源路線有望打造應(yīng)用繁榮的“安卓時刻”。DeepSeek完全開源了模型權(quán)重,允許其他開發(fā)者將模型用于商業(yè)用途并進行模型蒸餾。已發(fā)布了基于R1蒸餾Llama與Qwen的6個小模型,在多項基礎(chǔ)測試集中性能對標 o1-mini,被Facebook首席人工智能科學(xué)家楊立昆譽為“開源模型對閉源模型的勝利”。開源模型通過知識蒸餾快速打造高性能、輕量化小模型,將驅(qū)動端側(cè)模型在手機、電腦、眼鏡等智能硬件上的部署應(yīng)用,形成AI應(yīng)用百花齊放的格局。

編 輯:高靖宇
飛象網(wǎng)版權(quán)及免責(zé)聲明:
1.本網(wǎng)刊載內(nèi)容,凡注明來源為“飛象網(wǎng)”和“飛象原創(chuàng)”皆屬飛象網(wǎng)版權(quán)所有,未經(jīng)允許禁止轉(zhuǎn)載、摘編及鏡像,違者必究。對于經(jīng)過授權(quán)可以轉(zhuǎn)載,請必須保持轉(zhuǎn)載文章、圖像、音視頻的完整性,并完整標注作者信息和飛象網(wǎng)來源。
2.凡注明“來源:XXXX”的作品,均轉(zhuǎn)載自其它媒體,在于傳播更多行業(yè)信息,并不代表本網(wǎng)贊同其觀點和對其真實性負責(zé)。
3.如因作品內(nèi)容、版權(quán)和其它問題,請在相關(guān)作品刊發(fā)之日起30日內(nèi)與本網(wǎng)聯(lián)系,我們將第一時間予以處理。
本站聯(lián)系電話為86-010-87765777,郵件后綴為cctime.com,冒充本站員工以任何其他聯(lián)系方式,進行的“內(nèi)容核實”、“商務(wù)聯(lián)系”等行為,均不能代表本站。本站擁有對此聲明的最終解釋權(quán)。
相關(guān)新聞              
 
人物
vivo胡柏山:手機行業(yè)是最典型的新質(zhì)生產(chǎn)力代表
精彩專題
2024通信業(yè)年終盤點
2024數(shù)字科技生態(tài)大會
2024年度中國光電纜優(yōu)質(zhì)供應(yīng)商評選活動
2024全球6G發(fā)展大會
CCTIME推薦
關(guān)于我們 | 廣告報價 | 聯(lián)系我們 | 隱私聲明 | 本站地圖
CCTIME飛象網(wǎng) CopyRight © 2007-2024 By CCTIME.COM
京ICP備08004280號-1  電信與信息服務(wù)業(yè)務(wù)經(jīng)營許可證080234號 京公網(wǎng)安備110105000771號
公司名稱: 北京飛象互動文化傳媒有限公司
未經(jīng)書面許可,禁止轉(zhuǎn)載、摘編、復(fù)制、鏡像
主站蜘蛛池模板: 潍坊大集网-潍坊信息港-潍坊信息网 | 山东PE给水管厂家,山东双壁波纹管,山东钢带增强波纹管,山东PE穿线管,山东PE农田灌溉管,山东MPP电力保护套管-山东德诺塑业有限公司 | 废气处理设备-工业除尘器-RTO-RCO-蓄热式焚烧炉厂家-江苏天达环保设备有限公司 | FAG轴承,苏州FAG轴承,德国FAG轴承-恩梯必传动设备(苏州)有限公司 | 德国EA可编程直流电源_电子负载,中国台湾固纬直流电源_交流电源-苏州展文电子科技有限公司 | 小型数控车床-数控车床厂家-双头数控车床| 天命文免费算命堂_自助算命_自由算命系统_长文周易 | 厦门网站建设_厦门网站设计_小程序开发_网站制作公司【麦格科技】 | 进口便携式天平,外校_十万分之一分析天平,奥豪斯工业台秤,V2000防水秤-重庆珂偌德科技有限公司(www.crdkj.com) | 润滑脂-高温润滑脂-轴承润滑脂-食品级润滑油-索科润滑油脂厂家 | 掺铥光纤放大器-C/L波段光纤放大器-小信号光纤放大器-合肥脉锐光电技术有限公司 | 颚式破碎机,圆锥破碎机,制砂机-新乡市德诚机电制造有限公司 | 螺杆真空泵_耐腐蚀螺杆真空泵_水环真空泵_真空机组_烟台真空泵-烟台斯凯威真空 | 快速门厂家批发_PVC快速卷帘门_高速门_高速卷帘门-广州万盛门业 快干水泥|桥梁伸缩缝止水胶|伸缩缝装置生产厂家-广东广航交通科技有限公司 | 浴室柜-浴室镜厂家-YINAISI · 意大利设计师品牌 | 咿耐斯 |-浙江台州市丰源卫浴有限公司 | 郑州水质检测中心_井水检测_河南废气检测_河南中环嘉创检测 | 美国HASKEL增压泵-伊莱科elettrotec流量开关-上海方未机械设备有限公司 | 品牌策划-品牌设计-济南之式传媒广告有限公司官网-提供品牌整合丨影视创意丨公关活动丨数字营销丨自媒体运营丨数字营销 | 沈飞防静电地板__机房地板-深圳市沈飞防静电设备有限公司 | 仪器仪表网 - 永久免费的b2b电子商务平台 | 安平县鑫川金属丝网制品有限公司,防风抑尘网,单峰防风抑尘,不锈钢防风抑尘网,铝板防风抑尘网,镀铝锌防风抑尘网 | 品牌设计_VI设计_电影海报设计_包装设计_LOGO设计-Bacross新越品牌顾问 | 合肥弱电工程_安徽安防工程_智能化工程公司-合肥雷润 | 干粉砂浆设备_干混砂浆生产线_腻子粉加工设备_石膏抹灰砂浆生产成套设备厂家_干粉混合设备_砂子烘干机--郑州铭将机械设备有限公司 | 爱德华真空泵油/罗茨泵维修,爱发科-比其尔产品供应东莞/杭州/上海等全国各地 | vr安全体验馆|交通安全|工地安全|禁毒|消防|安全教育体验馆|安全体验教室-贝森德(深圳)科技 | 山东活动策划|济南活动公司|济南公关活动策划-济南锐嘉广告有限公司 | 煤矿支护网片_矿用勾花菱形网_缝管式_管缝式锚杆-邯郸市永年区志涛工矿配件有限公司 | 美缝剂_美缝剂厂家_美缝剂加盟-地老板高端瓷砖美缝剂 | 亚克力制品定制,上海嘉定有机玻璃加工制作生产厂家—官网 | 洗石机-移动滚筒式,振动,螺旋,洗矿机-青州冠诚重工机械有限公司 | 裹包机|裹膜机|缠膜机|绕膜机-上海晏陵智能设备有限公司 | 超声波气象站_防爆气象站_空气质量监测站_负氧离子检测仪-风途物联网 | 智能汉显全自动量热仪_微机全自动胶质层指数测定仪-鹤壁市科达仪器仪表有限公司 | 退火炉,燃气退火炉,燃气热处理炉生产厂家-丹阳市丰泰工业炉有限公司 | 成都装修公司-成都装修设计公司推荐-成都朗煜装饰公司 | 硫酸亚铁-聚合硫酸铁-除氟除磷剂-复合碳源-污水处理药剂厂家—长隆科技 | 衡阳耐适防护科技有限公司——威仕盾焊接防护用品官网/焊工手套/焊接防护服/皮革防护手套 | WF2户外三防照明配电箱-BXD8050防爆防腐配电箱-浙江沃川防爆电气有限公司 | 艺术涂料|木纹漆施工|稻草漆厂家|马来漆|石桦奴|水泥漆|选加河南天工涂料 | 厌氧反应器,IC厌氧反应器,厌氧三相分离器-山东创博环保科技有限公司 |