突然宣布!暂停DeepSeek API服务

专题:DeepSeek为何能震动全球AI圈   【导读】DeepSeek一天能赚多少钱?官方突然揭秘!潞晨科技暂停DeepSeek API服务...

专题:DeepSeek为何能震动全球AI圈

突然宣布!暂停DeepSeek API服务

  【导读】DeepSeek一天能赚多少钱?官方突然揭秘!潞晨科技暂停DeepSeek API服务

  中国基金报记者 泰勒

  大家好,一起关注一下关于DeepSeek的最新消息!

  DeepSeek首次披露:理论成本利润率545%

  当市场以为DeepSeek的开源周内容发布完毕之后,3月1日,DeepSeek宣布了“One More Thing”,突然揭秘V3/R1推理系統,公开了大规模部署成本和收益。

突然宣布!暂停DeepSeek API服务

  根据《DeepSeek-V3/R1推理系统概览》的文章,假定GPU租赁成本为2美元/小时,总成本为87072美元/天;如果所有tokens全部按照DeepSeek R1的定价计算,理论上一天的总收入为562027美元/天,成本利润率为545%。

  据官方披露,DeepSeek-V3/R1推理系统的优化目标是:更大的吞吐,更低的延迟。

  为了实现这两个目标,DeepSeek使用大规模跨节点专家并行(Expert Parallelism / EP)。首先EP使得batch size大大增加,从而提高GPU矩阵乘法的效率,提高吞吐。其次EP使得专家分散在不同的GPU上,每个 GPU 只需要计算很少的专家(因此更少的访存需求),从而降低延迟。

  但EP同时也增加了系统的复杂性。复杂性主要体现在两个方面:

  EP引入跨节点的传输。为了优化吞吐,需要设计合适的计算流程使得传输和计算可以同步进行。

  EP涉及多个节点,因此天然需要Data Parallelism(DP),不同的DP之间需要进行负载均衡。

  因此,DeepSeek介绍了如何使用EP增大batch size,如何隐藏传输的耗时,如何进行负载均衡。

  大规模跨节点专家并行(Expert Parallelism / EP)

  由于DeepSeek-V3/R1的专家数量众多,并且每层256个专家中仅激活其中8个。模型的高度稀疏性决定了必须采用很大的overall batch size,才能给每个专家提供足够的expert batch size,从而实现更大的吞吐、更低的延时。需要大规模跨节点专家并行(Expert Parallelism / EP)。

  采用多机多卡间的专家并行策略来达到以下目的:

  Prefill:路由专家EP32、MLA和共享专家DP32,一个部署单元是4节点,32个冗余路由专家,每张卡9个路由专家和1个共享专家。

  Decode:路由专家EP144、MLA和共享专家DP144,一个部署单元是18 节点,32个冗余路由专家,每张卡2个路由专家和1个共享专家。

  计算通信重叠

  多机多卡的专家并行会引入比较大的通信开销,所以使用了双batch重叠来掩盖通信开销,提高整体吞吐。

  对于prefill阶段,两个batch的计算和通信交错进行,一个batch在进行计算的时候可以去掩盖另一个batch的通信开销;

突然宣布!暂停DeepSeek API服务

  对于decode阶段,不同阶段的执行时间有所差别,所以把attention部分拆成了两个stage,共计5个stage的流水线来实现计算和通信的重叠。

突然宣布!暂停DeepSeek API服务

  尽可能地负载均衡

  由于采用了很大规模的并行(包括数据并行和专家并行),如果某个GPU的计算或通信负载过重,将成为性能瓶颈,拖慢整个系统;同时其他GPU因为等待而空转,造成整体利用率下降。因此需要尽可能地为每个GPU分配均衡的计算负载、通信负载。

PrefillLoadBalancer

核心问题:不同数据并行(DP)实例上的请求个数、长度不同,导致core-attention计算量、dispatch发送量也不同。

优化目标:各GPU的计算量尽量相同(core-attention计算负载均衡)、输入的token数量也尽量相同(dispatch发送量负载均衡),避免部分GPU处理时间过长。

DecodeLoadBalancer

核心问题:不同数据并行(DP)实例上的请求数量、长度不同,导致core-attention计算量(与KVCache占用量相关)、dispatch发送量不同。

优化目标:各GPU的KVCache占用量尽量相同(core-attention计算负载均衡)、请求数量尽量相同(dispatch发送量负载均衡)。

Expert-ParallelLoadBalancer

核心问题:对于给定MoE模型,存在一些天然的高负载专家(expert),导致不同GPU的专家计算负载不均衡。

优化目标:每个GPU上的专家计算量均衡(即最小化所有GPU的dispatch接收量的最大值)。

突然宣布!暂停DeepSeek API服务

  线上系统的实际统计数据

  DeepSeekV3和R1的所有服务均使用H800GPU,使用和训练一致的精度,即矩阵计算和dispatch传输采用和训练一致的FP8格式,core-attention计算和combine传输采用和训练一致的BF16,最大程度保证了服务效果。

  另外,由于白天的服务负荷高,晚上的服务负荷低,因此实现了一套机制,在白天负荷高的时候,用所有节点部署推理服务。晚上负荷低的时候,减少推理节点,以用来做研究和训练。在最近的24小时里(北京时间2025/02/27 12:00至2025/02/28 12:00),DeepSeek-V3和R1推理服务占用节点总和,峰值占用为278个节点,平均占用226.75个节点(每个节点为8个H800GPU)。假定GPU租赁成本为2美金/小时,总成本为87072美元/天。

突然宣布!暂停DeepSeek API服务

  在24小时统计时段内,DeepSeek-V3和R1:

  输入token总数为608B,其中342Btokens(56.3%)命中KVCache硬盘缓存。

  输出token总数为168B。平均输出速率为20~22tps,平均每输出一个token的KVCache长度是4989。

  平均每台H800的吞吐量为:对于prefill任务,输入吞吐约73.7ktokens/s(含缓存命中);对于decode任务,输出吞吐约14.8ktokens/s。

  以上统计包括了网页、APP和API的所有负载。如果所有tokens全部按照DeepSeek-R1的定价计算,理论上一天的总收入为562027美元,成本利润率为545%。当然实际上没有这么多收入,因为V3的定价更低,同时收费服务只占了一部分,另外夜间还会有折扣。

突然宣布!暂停DeepSeek API服务

  有网友将DeepSeek与OpenAI进行对比,表示:“‘成本利润率545%’,等一下,所以你是说我被OpenAI抢劫了?”

突然宣布!暂停DeepSeek API服务

  潞晨科技暂停DeepSeek API服务

  就在DeepSeek披露大规模部署成本和收益之后,潞晨科技突然宣布:“尊敬的用户,潞晨云将在一周后停止提供DeepSeek API服务,请尽快用完您的余额。如果没用完,我们全额退款。”

突然宣布!暂停DeepSeek API服务

  此前2月4日晚间,华为计算微信公众号发文表示,DeepSeek-R1系列模型的开源,因其出色的性能和低廉的开发成本,已引发全球的热切讨论和关注。潞晨科技携手昇腾,联合发布基于昇腾算力的DeepSeek-R1系列推理API,及云镜像服务。

  但近期潞晨科技CEO尤洋指出,满血版DeepSeek-R1每百万token(输出)定价16元,如果每日输出1000亿token,一个月算下来接入方企业可获得4800万元收入。据他测算,完成1000亿token的输出,需要约4000台搭载H800的机器,以目前H800的市价或者折旧来计算,每月仅机器成本就达4.5亿元,因此企业方可能面临每月4亿元的亏损,“用户越多,服务成本越高,亏损越多”。

突然宣布!暂停DeepSeek API服务

  3月1日下午4点,潞晨科技CEO尤洋发文回应DeepSeek公布的理论成本利润率。

突然宣布!暂停DeepSeek API服务

  公开资料显示,潞晨科技是一家致力于“解放AI生产力”的全球性企业,团队核心成员来自美国加州大学伯克利分校,斯坦福大学,清华大学,北京大学等国内外知名高校。主营业务包括分布式软件系统,大规模人工智能平台,以及企业级云计算解决方案。公司旨在打造一个开源低成本AI大模型开发系统Colossal-AI,作为深度学习框架的内核,帮助企业最大化人工智能训练效率的同时最小化人工智能的训练成本。

  校对:纪元

  编辑:嘉颖

  审核:许闻

本文来自作者[半蕾]投稿,不代表发展号立场,如若转载,请注明出处:https://www.fastcode.vip/txbk/202509-2264.html

(88)

文章推荐

  • 乙醚制备过程中的关键因素与质量控制乙醚制备过程中的关键因素与质量控制措施

    怎样制备乙醚?1、例如,将乙醇和浓硫酸反应的温度控制在125°C,乙醇将发生分子间脱水,生成乙醚。化学方程式为:2CHCHOH→CHCH-O-CHCH+HO。醚是醇或酚的羟基中的氢被烃基取代的产物,通式为R-O-R,R和R’可以相同,也可以不同。相同者为对称醚,不同者称为混合醚。2、乙醚的制备如下

    2025年03月02日
    79
  • 保险科技上市潮|车车科技上市首日暴涨后随即暴跌市值已蒸发近99% 营收增速放缓应收账款却高增

      出品:新浪财经上市公司研究院     作者:坤  2015年以来,在各路资本与互联网的推动下,保险科技行业从传统保险行业中“脱胎换骨”,新型业务模式与一众公司涌现,赛道进入高速发展期。但高歌猛进的表象之下,却是大多数都在业绩与资本的多重压力下艰难前行。  据CBInsights报告显示

    2025年03月07日
    76
  • 奸情技巧微信小程序开挂方法!专业师傅带你一起了解(详细教程)(这位名叫苍井优的女优)

    “无心插柳,柳成荫”去年一部日本电影,就上演了一出开挂的意外惊喜——这部电影原本是由日本NHK电视台监制,拍成八集的电视剧,结果因为拍得太好,就说顺手改了个剧场版送去了影展。结果又因为改得太好,顺手又拿下了2020年威尼斯影展最佳导演银狮奖。啧啧啧,命运,妙不可言。很多人可能已经猜到了这部电影是啥了

    2025年03月22日
    82
  • 瑞丽电子杂志下载瑞丽杂志在线阅读免费

    瑞丽电子杂志瑞丽官网(http://)提供了电子杂志下载服务。首先,你需要访问瑞丽官网并找到电子杂志网站链接,点击进入。在电子杂志网站上,你可以找到一个插件下载按钮,点击下载对应插件。下载完成后,按照提示进行安装。瑞丽电子杂志是一本融合时尚、美容、生活等多元素的电子期刊。瑞丽电子杂志充分利用了数字

    2025年04月09日
    97
  • 天麻的产地天麻的产地加工方法是

    天麻的种植与生长条件种植土壤天麻喜欢在潮湿的环境中生长,土壤的湿度控制在20%左右,选择保湿性好的黑土,并在里面加入适当的淤泥;在种植天麻,在土壤中埋入少许的稀释氮肥,能有快速的让天麻种子萌发。种植条件营养供应:天麻没有根和叶,自身无法进行光合作用,因此依靠蜜环菌供应补充营养物质以进行繁衍。环

    2025年04月10日
    78
  • 溪黄草的功效溪黄草的功效与归经

    溪黄草茶可以常喝吗?1、溪黄草茶不可以常喝。虽然溪黄草具有清热解毒、利湿退黄、散瘀消肿等多种功效,但并不适合长期饮用,原因如下:加重肝脏负担:长期喝溪黄草茶可能会加重肝脏的负担。肝脏是人体的重要解毒器官,长期摄入药物或草药成分可能对其造成不良影响,进而影响身体健康。2、如果没有相应的证型,比如肝

    2025年04月11日
    61
  • 沈阳军区医院沈阳军区医院挂号网上预约

    沈阳军区医院有哪些沈阳军区联勤部男科医院,专注于男性生理健康问题的解决,开设了男性性功能障碍科、男性生殖整形科、泌尿感染科、生殖系统炎症科以及男性不育科等多个重点科室。作为一家部队公立甲等男科医院,沈阳军区联勤部男科医院在甲状腺疾病专科领域也表现卓越,被评选为十佳甲状腺疾病专科医院。沈阳军区政治部

    2025年04月17日
    82
  • 治疗阳痿早泄治阳萎早迣吃什么中药

    治阳痿早泄吃什么药1、蚕茸柱天胶囊源于张景岳的名方,集温补肾阳和滋养精血于一体,适用于阳痿、早泄等症。其主要成分如雄蚕蛾、淫羊藿等温肾壮阳,配合鹿茸等补益精血,整体提升男性生殖功能。最后,金蚧片由金樱子、蛤蚧等补肾壮阳药物组成,对肾阳虚引发的性功能减退、早泄等症有显著效果。2、金匮肾气丸金匮肾气

    2025年04月21日
    66
  • 如何提高功能如何提高功能能力

    男人怎么能提高性功能为了提升男性的性能力,可以从多个方面入手。首先,要避免各种刺激性食物,并避免吸烟和饮酒。这些不良习惯可能会对男性的性功能产生负面影响。其次,多做户外运动和多锻炼,这有助于促进血液循环,增强身体的适应能力。此外,也可以配合口服一些多元维生素片,以补充身体所需的营养。男人性能力不强

    2025年04月22日
    62
  • 俄罗斯,大规模袭乌!欧盟,计划全面禁止进口俄油气!集运市场何去何从

      来源:期货日报  早上好,来看一些热点消息。  俄罗斯发动大规模袭击  据央视报道,当地时间6月17日,乌克兰基辅军政管理局负责人特卡琴科表示,当日凌晨俄罗斯对基辅及周边地区发动了大规模袭击,此次袭击击中了居民楼,造成严重损失。  特卡琴科指出,5个地区共发生12起袭击事件,其中包

    2025年06月18日
    40

发表回复

本站作者后才能评论

评论列表(4条)

  • 半蕾
    半蕾 2025年09月13日

    我是发展号的签约作者“半蕾”!

  • 半蕾
    半蕾 2025年09月13日

    希望本篇文章《突然宣布!暂停DeepSeek API服务》能对你有所帮助!

  • 半蕾
    半蕾 2025年09月13日

    本站[发展号]内容主要涵盖:国足,欧洲杯,世界杯,篮球,欧冠,亚冠,英超,足球,综合体育

  • 半蕾
    半蕾 2025年09月13日

    本文概览:专题:DeepSeek为何能震动全球AI圈   【导读】DeepSeek一天能赚多少钱?官方突然揭秘!潞晨科技暂停DeepSeek API服务...

    联系我们

    邮件:发展号@sina.com

    工作时间:周一至周五,9:30-18:30,节假日休息

    关注我们