全球主机交流论坛

标题: deepseek的训练成本到底有没有假? [打印本页]

作者: rebeke    时间: 2025-1-29 11:14
标题: deepseek的训练成本到底有没有假?
他光说自己便宜,有任何客观证据吗?
作者: DogeLee2    时间: 2025-1-29 11:22
本帖最后由 DogeLee2 于 2025-1-29 11:40 编辑

https://github.com/deepseek-ai/DeepSeek-V3/blob/main/DeepSeek_V3.pdf

有论文的,自己看

我觉得肯定不止550万美金
但是实际上就算翻十倍
那成本也很低了
作者: julie    时间: 2025-1-29 11:22
所有成本加起来几乎肯定不止几百万美金的. 就象房屋装潢成本不能就计算建材费用一样!
作者: 梦想成真    时间: 2025-1-29 11:23
本帖最后由 梦想成真 于 2025-1-29 11:26 编辑

论坛这帮孙子前几天都说是套壳吗,你认为论坛那些垃圾废物能回答出啥
作者: 掩耳盗铃    时间: 2025-1-29 11:24
不需要你自己验证,市场资本已经表现出来了
作者: 我是老王    时间: 2025-1-29 11:25
那么多美国大学都说是真的 怎么到你这里还要验证?
作者: 迪士尼    时间: 2025-1-29 11:44
咱们论坛有很多杠精,你提出一个观念,他们非要和你杠,这种人往往现实生活中没啥本事,看人家脸色行事,只能在网上跟你人家杠
作者: rebeke    时间: 2025-1-29 11:51
掩耳盗铃 发表于 2025-1-29 11:24
不需要你自己验证,市场资本已经表现出来了

美股又反弹大涨了,就是因为出现了质疑deepseek造假的情绪,到底是不是大量使用了禁售的H100训练模型?
作者: 四叶草    时间: 2025-1-29 13:20
假的
但凡有一个中文字的东西都是假的

台积电内鬼卖的
作者: sliver    时间: 2025-1-29 13:50
本帖最后由 sliver 于 2025-1-29 14:14 编辑

推上的说法是计算方法不同

当我们说大模型成本的时候,包含比如 H100 的硬件、获取数据、人员工资等在内,deepseek 的单次训练成本并没有包含这些。今天的一个说法是 deepseek 利用了新加坡的机房绕开美国管制,它并没有获得足够的奶牛(芯片),但获得了足够的牛奶(算力),这也使得它在谈论 “成本” 时更简单和低廉

即使这样, deepseek 依然令人惊艳

推上还有一个比喻,openai 等头部是花费大量心力培养了了一个高级教授,deepseek 是向教授学习的学徒,只需要 4年学期,并且他在向多位不同的教授学习。后者在某些分支的深度上可能不如前者,但成本低廉,并且在整体广度和深度上,甚至可能表现比前者好
作者: wwbfred    时间: 2025-1-29 16:56
任何你不熟悉的东西,你都可以等几个月再过来看。
时间会让一切事物露出它的原型。只要你不着急下结论,谁都无法骗到你。
作者: root123    时间: 2025-1-29 17:03

作者: beiwei    时间: 2025-1-29 17:05

作者: 2CO3    时间: 2025-1-29 17:09
只算人工费,估计都不止了
作者: lanmin    时间: 2025-1-29 18:28
有硬件的公司 应该早就拿开源模型测试了,要不然这几天肯定有反对声音了。
作者: zby    时间: 2025-1-29 19:33
好像这玩意开源的啊。据说测试是这样的
作者: M100700    时间: 2025-1-29 19:34
我的理解是这样,openai 这些公司从网上采集原始的低质量数据训练自己的模型,但DS直接用这些模型产生的高质量数据训练自己的模型。这样一来肯定性价比无敌。这个做法应该不止DS一家公司想到,没准那几大公司都在干也说不定,但为何只有DS干成了,说明DS还是有点东西的。

问题是关键我觉得有2点:

1,高质量原始数据
2,自己“蒸馏”数据的技术

目前看来,DS蒸馏数据的技术应该是很强的,否则不会只有它干成了。但高质量的原始数据这一点,恐怕以后会被卡脖子,不过我认为数据这种东西想卡脖子的难度还是比较大的。



作者: momomo    时间: 2025-1-29 20:02
梦想成真 发表于 2025-1-29 11:23
论坛这帮孙子前几天都说是套壳吗,你认为论坛那些垃圾废物能回答出啥 ...

已经各种角度说DS不行,还是洋人出的东西好了




欢迎光临 全球主机交流论坛 (https://443502.xyz/) Powered by Discuz! X3.4