由买买提看人间百态

boards

本页内容为未名空间相应帖子的节选和存档,一周内的贴子最多显示50字,超过一周显示500字 访问原贴
Programming版 - 这一波AI是不是算完结了
相关主题
Google的Quoc Le有多牛?WhatsApp, SnapChat 都有自己的数据中心吗?
请教个排序的题目京东有了云平台了
c++的高级的东东在实际项目开发中到底有没有很大的应用阿?被亚马逊绑架的问题
1-2ms内反馈挖比特币的程序是如何做到无法hack的
魏老师拿不出10万次/秒写的数据库真心请教,究竟怎么设计才能处理每秒100万次的写操作
春运这个东西,用Storm就可以轻松搞定了嫌wifi慢的我出一个主意
魏老师这次给一群失意者们带来了希望ubuntu apt-get 404了
吓一跳JAVA真的这么挫了么storm还有spark为代表的real time streaming这一波下去之后
相关话题的讨论汇总
话题: ai话题: msft话题: 训练话题: 算力话题: openai
进入Programming版参与讨论
1 (共1页)
b****u
发帖数: 1130
1
感觉很多公司开始回归传统了。
特别是疫情以后,地主家没有余粮。
e***a
发帖数: 1661
2
这波 AI 公司的变现能力确实有限,
但是应该用发展的目光看待这个事物。
f*******t
发帖数: 7549
3
training太贵了,现在大型model train一次有百万刀以上的开销。另外迭代速度很慢
,startup也很缺时间。
摘抄一段:“总部位于加州的OpenAI表示,随着对机器学习兴趣的不断增加,对算力的
需求从12年开始也急剧增加了。到18年,用于训练大型模型的计算机算力相比之前已增
长了30万倍,并且还每三个半月翻一番(见图)。比如,为训练能在DOTA 2中击败人类
的“OpenAI Five”系统,就几乎将机器学习训练扩展到了“前所未有的水平”,差不
多用数千块芯片训练了十多个月。
关于所有这些训练成本的确切数字,马萨诸塞州阿默斯特大学的研究人员在19年发表的
一篇论文中进行了估计,例如训练某个版本的Transformer模型可能就要花费300万美金
。同时Facebook的AI负责人杰罗姆·佩森蒂表示,针对当前最大的模型进行一轮训练光
是电费可能就好几百万美金。”
n********t
发帖数: 21
4
在可以大规模试错过程中,还是有人用的。
http://www.youtube.com/watch?v=wPzgcD7nBEU&t=2m50s

【在 b****u 的大作中提到】
: 感觉很多公司开始回归传统了。
: 特别是疫情以后,地主家没有余粮。

g****t
发帖数: 31659
5
戏法人人会变,巧妙各有不同。
MSFT intelligent Cloud Revenue increased $2.5 billion or 27%.
Platform AI不如msft為準。


: training太贵了,现在大型model train一次有百万刀以上的开销。另外
迭代速
度很慢

: ,startup也很缺时间。

: 摘抄一段:“总部位于加州的OpenAI表示,随着对机器学习兴趣的
不断增加,对
算力的

: 需求从12年开始也急剧增加了。到18年,用于训练大型模型的计算机算力
相比之
前已增

: 长了30万倍,并且还每三个半月翻一番(见图)。比如,为训练能在DOTA
2中击
败人类

: 的“OpenAI Five”系统,就几乎将机器学习训练扩展到了

【在 f*******t 的大作中提到】
: training太贵了,现在大型model train一次有百万刀以上的开销。另外迭代速度很慢
: ,startup也很缺时间。
: 摘抄一段:“总部位于加州的OpenAI表示,随着对机器学习兴趣的不断增加,对算力的
: 需求从12年开始也急剧增加了。到18年,用于训练大型模型的计算机算力相比之前已增
: 长了30万倍,并且还每三个半月翻一番(见图)。比如,为训练能在DOTA 2中击败人类
: 的“OpenAI Five”系统,就几乎将机器学习训练扩展到了“前所未有的水平”,差不
: 多用数千块芯片训练了十多个月。
: 关于所有这些训练成本的确切数字,马萨诸塞州阿默斯特大学的研究人员在19年发表的
: 一篇论文中进行了估计,例如训练某个版本的Transformer模型可能就要花费300万美金
: 。同时Facebook的AI负责人杰罗姆·佩森蒂表示,针对当前最大的模型进行一轮训练光

C*****l
发帖数: 1
6
现在国内正在搞新基建,在大中型城市建大数据人工智能计算集群,对硬件是利好。现
在的问题是在客户端怎么套现确实还没有想清楚,有点类似于2000年左右的电子商务,
大家只有一个rough idea。
“近日,总投资超150亿元的腾讯长三角人工智能超算中心及产业基地落户上海西南门
户松江区。这个“MALL”里装了什么“魔法棒”,能为上海新型基础设施建设注入哪些
新动力?
据悉,该超算中心将承担各种大规模AI算法计算、机器学习、图像处理、科学计算和工
程计算任务,并以强大的数据处理和存储能力为上海科技影都、正泰启迪智电港、恒大
新能源汽车等一批重大项目提供云计算服务,加快实现“数字产业化””

【在 g****t 的大作中提到】
: 戏法人人会变,巧妙各有不同。
: MSFT intelligent Cloud Revenue increased $2.5 billion or 27%.
: Platform AI不如msft為準。
:
:
: training太贵了,现在大型model train一次有百万刀以上的开销。另外
: 迭代速
: 度很慢
:
: ,startup也很缺时间。
:
: 摘抄一段:“总部位于加州的OpenAI表示,随着对机器学习兴趣的
: 不断增加,对

n******t
发帖数: 4406
7
與其說是太貴,還不如說是其實不賺錢。
AI不確定性導致真正現在立竿見影的是搞破壞而非建設,諸如電信詐騙,軍事,輿論控
制之類的。這東西對於public sector來說,不好兌現。有兌現的,也兌得差不多了。

【在 f*******t 的大作中提到】
: training太贵了,现在大型model train一次有百万刀以上的开销。另外迭代速度很慢
: ,startup也很缺时间。
: 摘抄一段:“总部位于加州的OpenAI表示,随着对机器学习兴趣的不断增加,对算力的
: 需求从12年开始也急剧增加了。到18年,用于训练大型模型的计算机算力相比之前已增
: 长了30万倍,并且还每三个半月翻一番(见图)。比如,为训练能在DOTA 2中击败人类
: 的“OpenAI Five”系统,就几乎将机器学习训练扩展到了“前所未有的水平”,差不
: 多用数千块芯片训练了十多个月。
: 关于所有这些训练成本的确切数字,马萨诸塞州阿默斯特大学的研究人员在19年发表的
: 一篇论文中进行了估计,例如训练某个版本的Transformer模型可能就要花费300万美金
: 。同时Facebook的AI负责人杰罗姆·佩森蒂表示,针对当前最大的模型进行一轮训练光

f*******t
发帖数: 7549
8
msft这个是卖算力的还是通过类似于ads的产品挣钱?如果是前者,不正说明了用户被
抽血么。

【在 g****t 的大作中提到】
: 戏法人人会变,巧妙各有不同。
: MSFT intelligent Cloud Revenue increased $2.5 billion or 27%.
: Platform AI不如msft為準。
:
:
: training太贵了,现在大型model train一次有百万刀以上的开销。另外
: 迭代速
: 度很慢
:
: ,startup也很缺时间。
:
: 摘抄一段:“总部位于加州的OpenAI表示,随着对机器学习兴趣的
: 不断增加,对

c*******v
发帖数: 2599
9
首先,數字就是數字。從MSFT 這個sector多個季度的高速增長來
看,很難相信platoform AI完了。這是第一個topic。
MSFT的revenue怎麼來的?與第一個topic無關。
MSFT說不定是用了萬分之一的AI優勢買了一堆硬盤呢?這完全有可能。
但是即便如此,你仍然不能說platform AI完了。能賣硬盤,那也是本事。
最後,如果大家隨便說說,那誰想說啥誰說啥。並沒什麼關係。
如果是要決定是否投入時間和精力在這個方向,甚至要投資買股票。
我的建議是看看數字。

【在 f*******t 的大作中提到】
: msft这个是卖算力的还是通过类似于ads的产品挣钱?如果是前者,不正说明了用户被
: 抽血么。

l*******m
发帖数: 1096
10
至少rtx gpu都用上AI了,gamers已经花了很多钱了

:感觉很多公司开始回归传统了。
:特别是疫情以后,地主家没有余粮。
相关主题
魏老师这次给一群失意者们带来了希望京东有了云平台了
吓一跳JAVA真的这么挫了么被亚马逊绑架的问题
WhatsApp, SnapChat 都有自己的数据中心吗?挖比特币的程序是如何做到无法hack的
进入Programming版参与讨论
c*******v
发帖数: 2599
11
目前超大規模N by M fitting,還是只有AI這一條路。沒有別的選擇。
我懷疑從今往後,古典的研究道路就斷根了。
也許今後網上的女士的照片,再沒有不被AI處理過的。

【在 l*******m 的大作中提到】
: 至少rtx gpu都用上AI了,gamers已经花了很多钱了
:
: :感觉很多公司开始回归传统了。
: :特别是疫情以后,地主家没有余粮。

h*****2
发帖数: 2070
12
这种基本上就是在做基建,跟搞楼堂馆所没有任何区别,GDP会好看,其实就是最底层
的重复性劳动。
政绩工程而已。不用想太多。

【在 C*****l 的大作中提到】
: 现在国内正在搞新基建,在大中型城市建大数据人工智能计算集群,对硬件是利好。现
: 在的问题是在客户端怎么套现确实还没有想清楚,有点类似于2000年左右的电子商务,
: 大家只有一个rough idea。
: “近日,总投资超150亿元的腾讯长三角人工智能超算中心及产业基地落户上海西南门
: 户松江区。这个“MALL”里装了什么“魔法棒”,能为上海新型基础设施建设注入哪些
: 新动力?
: 据悉,该超算中心将承担各种大规模AI算法计算、机器学习、图像处理、科学计算和工
: 程计算任务,并以强大的数据处理和存储能力为上海科技影都、正泰启迪智电港、恒大
: 新能源汽车等一批重大项目提供云计算服务,加快实现“数字产业化””

f*******t
发帖数: 7549
13
大笔的钱要送给intel和NVIDIA了,除非强行要求安装平头哥之类的国产芯片

【在 h*****2 的大作中提到】
: 这种基本上就是在做基建,跟搞楼堂馆所没有任何区别,GDP会好看,其实就是最底层
: 的重复性劳动。
: 政绩工程而已。不用想太多。

C*****l
发帖数: 1
14
不一定,数据中心对intel和nvidia粘性没有那么大,加上苹果现在自立门户了,芯片
界的大变局恐怕已经是山雨欲来风满楼。

【在 f*******t 的大作中提到】
: 大笔的钱要送给intel和NVIDIA了,除非强行要求安装平头哥之类的国产芯片
f*******t
发帖数: 7549
15
数据中心除了这两家还能用啥cpu和gpu?
苹果自己的A系列芯片专门为客户端优化。我记得看过一篇介绍A12的文章,里边有两个
高性能高功耗的核,和两颗低功耗的核。服务器市场暂时用不上这些特殊的配置,而且
intel也在发力数据中心布局。

【在 C*****l 的大作中提到】
: 不一定,数据中心对intel和nvidia粘性没有那么大,加上苹果现在自立门户了,芯片
: 界的大变局恐怕已经是山雨欲来风满楼。

C*****l
发帖数: 1
16
你不知道苹果APPLE SILION马上要出arm芯片替代intel? ARM芯片来势汹汹,AI加速器
选择更多

【在 f*******t 的大作中提到】
: 数据中心除了这两家还能用啥cpu和gpu?
: 苹果自己的A系列芯片专门为客户端优化。我记得看过一篇介绍A12的文章,里边有两个
: 高性能高功耗的核,和两颗低功耗的核。服务器市场暂时用不上这些特殊的配置,而且
: intel也在发力数据中心布局。

s********k
发帖数: 6180
17
苹果的A系列,核数重来不多,堆核心一般是qualcomm之类的,包括华为。苹果是拼单
核能力,当然Die size也大

【在 f*******t 的大作中提到】
: 数据中心除了这两家还能用啥cpu和gpu?
: 苹果自己的A系列芯片专门为客户端优化。我记得看过一篇介绍A12的文章,里边有两个
: 高性能高功耗的核,和两颗低功耗的核。服务器市场暂时用不上这些特殊的配置,而且
: intel也在发力数据中心布局。

s********k
发帖数: 6180
18
为啥这个事情要超算中心做而不是cloud做?

【在 C*****l 的大作中提到】
: 现在国内正在搞新基建,在大中型城市建大数据人工智能计算集群,对硬件是利好。现
: 在的问题是在客户端怎么套现确实还没有想清楚,有点类似于2000年左右的电子商务,
: 大家只有一个rough idea。
: “近日,总投资超150亿元的腾讯长三角人工智能超算中心及产业基地落户上海西南门
: 户松江区。这个“MALL”里装了什么“魔法棒”,能为上海新型基础设施建设注入哪些
: 新动力?
: 据悉,该超算中心将承担各种大规模AI算法计算、机器学习、图像处理、科学计算和工
: 程计算任务,并以强大的数据处理和存储能力为上海科技影都、正泰启迪智电港、恒大
: 新能源汽车等一批重大项目提供云计算服务,加快实现“数字产业化””

f*******t
发帖数: 7549
19
用在macbook上,离服务器还很远

【在 C*****l 的大作中提到】
: 你不知道苹果APPLE SILION马上要出arm芯片替代intel? ARM芯片来势汹汹,AI加速器
: 选择更多

n******t
发帖数: 4406
20
拿msft賺的錢來說沒意義。
這是一個可以直接吧NT裝到美軍軍艦上面替代UNIX然後當場死機導致癱瘓還能全身而退
的公司。
你要有這公司的陰招,你可以賣出去任何東西。

【在 g****t 的大作中提到】
: 戏法人人会变,巧妙各有不同。
: MSFT intelligent Cloud Revenue increased $2.5 billion or 27%.
: Platform AI不如msft為準。
:
:
: training太贵了,现在大型model train一次有百万刀以上的开销。另外
: 迭代速
: 度很慢
:
: ,startup也很缺时间。
:
: 摘抄一段:“总部位于加州的OpenAI表示,随着对机器学习兴趣的
: 不断增加,对

s*********y
发帖数: 6151
21
AI落地 才刚刚开始
1 (共1页)
进入Programming版参与讨论
相关主题
谁看明白这篇文章说的是啥?魏老师拿不出10万次/秒写的数据库
互联网这一波泡沫怕是快要退去了春运这个东西,用Storm就可以轻松搞定了
手机app娱乐可以,干活是不行的。魏老师这次给一群失意者们带来了希望
搞AI是不是一定需要学习cuda?吓一跳JAVA真的这么挫了么
Google的Quoc Le有多牛?WhatsApp, SnapChat 都有自己的数据中心吗?
请教个排序的题目京东有了云平台了
c++的高级的东东在实际项目开发中到底有没有很大的应用阿?被亚马逊绑架的问题
1-2ms内反馈挖比特币的程序是如何做到无法hack的
相关话题的讨论汇总
话题: ai话题: msft话题: 训练话题: 算力话题: openai