d*e 发帖数: 843 | 1 【 以下文字转载自 Faculty 讨论区 】
发信人: dde (DDT), 信区: Faculty
标 题: 牛人很神奇的简历啊
发信站: BBS 未名空间站 (Fri May 14 22:11:43 2010, 美东)
http://www.cs.berkeley.edu/~jordan/jordan-cv.pdf
Member, National Academy of Sciences, 2010.
Member, National Academy of Engineering, 2010.
今年NAE和NAS双料新科院士。。。
可是,他88年麻省大学做完博士后时,paper几乎是0啊,咋找到MIT AP职位的?
那会是不是是个博士/博士后都能找到AP职位啊。。。 |
H*********r 发帖数: 659 | 2 He must have convinced senior professors of MIT that he was going to a
superstar of the field.
But it's quite easy to find a faculty position before 2000, after that ....
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 【 以下文字转载自 Faculty 讨论区 】 : 发信人: dde (DDT), 信区: Faculty : 标 题: 牛人很神奇的简历啊 : 发信站: BBS 未名空间站 (Fri May 14 22:11:43 2010, 美东) : http://www.cs.berkeley.edu/~jordan/jordan-cv.pdf : Member, National Academy of Sciences, 2010. : Member, National Academy of Engineering, 2010. : 今年NAE和NAS双料新科院士。。。 : 可是,他88年麻省大学做完博士后时,paper几乎是0啊,咋找到MIT AP职位的? : 那会是不是是个博士/博士后都能找到AP职位啊。。。
|
n***l 发帖数: 1468 | 3 这个人, 在machine learning领域, 那是超级大牛啊, top3肯定是没问题的. |
P**l 发帖数: 3722 | 4 这不是迈克尔乔丹吗?
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 【 以下文字转载自 Faculty 讨论区 】 : 发信人: dde (DDT), 信区: Faculty : 标 题: 牛人很神奇的简历啊 : 发信站: BBS 未名空间站 (Fri May 14 22:11:43 2010, 美东) : http://www.cs.berkeley.edu/~jordan/jordan-cv.pdf : Member, National Academy of Sciences, 2010. : Member, National Academy of Engineering, 2010. : 今年NAE和NAS双料新科院士。。。 : 可是,他88年麻省大学做完博士后时,paper几乎是0啊,咋找到MIT AP职位的? : 那会是不是是个博士/博士后都能找到AP职位啊。。。
|
i*********8 发帖数: 3229 | 5 这就是作为老美的优势了,
有些老美博士的时候屁都没有,然后再好学占了一个好坑找了牛学生出了一堆牛成果,
美国这个系统你也分不出是谁的贡献然后就成名了。
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 【 以下文字转载自 Faculty 讨论区 】 : 发信人: dde (DDT), 信区: Faculty : 标 题: 牛人很神奇的简历啊 : 发信站: BBS 未名空间站 (Fri May 14 22:11:43 2010, 美东) : http://www.cs.berkeley.edu/~jordan/jordan-cv.pdf : Member, National Academy of Sciences, 2010. : Member, National Academy of Engineering, 2010. : 今年NAE和NAS双料新科院士。。。 : 可是,他88年麻省大学做完博士后时,paper几乎是0啊,咋找到MIT AP职位的? : 那会是不是是个博士/博士后都能找到AP职位啊。。。
|
N**D 发帖数: 10322 | 6 so so
has lots of funding
【在 n***l 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这个人, 在machine learning领域, 那是超级大牛啊, top3肯定是没问题的.
|
P***P 发帖数: 1387 | 7 无知者无畏
牛不牛看他的学生有多少在top10当教授就知道了
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : so so : has lots of funding
|
N**D 发帖数: 10322 | 8 u r obviously young
【在 P***P 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 无知者无畏 : 牛不牛看他的学生有多少在top10当教授就知道了
|
l****g 发帖数: 761 | 9 估计你不是做 ML 的
不然不会不知道 Michael Jordan 的
他的学生比如 Andrew Ng 和 Eric Xing 现在都是呼风唤雨的人物了
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : u r obviously young
|
w***n 发帖数: 1084 | 10 I think he is more famous for his achievement in NBA. |
|
|
d*e 发帖数: 843 | 11 难怪当上院士了,哈哈
【在 P***P 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 无知者无畏 : 牛不牛看他的学生有多少在top10当教授就知道了
|
d*e 发帖数: 843 | 12 没发迹以前,怎么占坑呢?
【在 n***l 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这个人, 在machine learning领域, 那是超级大牛啊, top3肯定是没问题的.
|
d*****u 发帖数: 17243 | 13 Eric Xing也是折腾高手啊
物理本科,生物PhD
然后不过瘾又去念个CS的PhD
【在 l****g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 估计你不是做 ML 的 : 不然不会不知道 Michael Jordan 的 : 他的学生比如 Andrew Ng 和 Eric Xing 现在都是呼风唤雨的人物了
|
v******d 发帖数: 1322 | 14 生物phd路很难走,只好转专业,不是不过瘾
【在 d*****u 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Eric Xing也是折腾高手啊 : 物理本科,生物PhD : 然后不过瘾又去念个CS的PhD
|
d*e 发帖数: 843 | 15 这个吗?
University of California, Berkeley, Ph.D. in Computer Science (1999–2004).
Research advisors: Profs. Richard Karp, Michael Jordan and Stuart Russell
Rutgers University, Ph.D. in Molecular Biology and Biochemistry (1994–1999).
Research advisor: Prof. Chung S. Yang
Rutgers University, M.Sc. in Computer Science (1996–1998).
Research advisor: Prof. Casimir Kulikowski
Tsinghua University, B.Sc. in Physics and Biology (dual major, 1988–1993).
Research advisor: Prof. Jun Zhao
实在是佩服啊
【在 d*****u 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Eric Xing也是折腾高手啊 : 物理本科,生物PhD : 然后不过瘾又去念个CS的PhD
|
d*e 发帖数: 843 | 16 一般人哪有这个毅力啊
1999).
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这个吗? : University of California, Berkeley, Ph.D. in Computer Science (1999–2004). : Research advisors: Profs. Richard Karp, Michael Jordan and Stuart Russell : Rutgers University, Ph.D. in Molecular Biology and Biochemistry (1994–1999). : Research advisor: Prof. Chung S. Yang : Rutgers University, M.Sc. in Computer Science (1996–1998). : Research advisor: Prof. Casimir Kulikowski : Tsinghua University, B.Sc. in Physics and Biology (dual major, 1988–1993). : Research advisor: Prof. Jun Zhao : 实在是佩服啊
|
L********d 发帖数: 3820 | 17 看来大家对统计的状况不太清楚啊
很多统计phd不需要paper就可以毕业,甚至不需要paper就可以找到faculty
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 【 以下文字转载自 Faculty 讨论区 】 : 发信人: dde (DDT), 信区: Faculty : 标 题: 牛人很神奇的简历啊 : 发信站: BBS 未名空间站 (Fri May 14 22:11:43 2010, 美东) : http://www.cs.berkeley.edu/~jordan/jordan-cv.pdf : Member, National Academy of Sciences, 2010. : Member, National Academy of Engineering, 2010. : 今年NAE和NAS双料新科院士。。。 : 可是,他88年麻省大学做完博士后时,paper几乎是0啊,咋找到MIT AP职位的? : 那会是不是是个博士/博士后都能找到AP职位啊。。。
|
I*****2 发帖数: 1586 | 18 you are too narrow mind.
ML is not everything.
【在 l****g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 估计你不是做 ML 的 : 不然不会不知道 Michael Jordan 的 : 他的学生比如 Andrew Ng 和 Eric Xing 现在都是呼风唤雨的人物了
|
d*****u 发帖数: 17243 | 19 一般转也不会转PhD的,所以他确实是有学术追求,不是路不好走
再说他在拿到生物PhD之前已经有CS的master
在90年代末找工作应该是很容易的
不过这人貌似是奥赛得过名次的,所以不具有可复制性
【在 v******d 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 生物phd路很难走,只好转专业,不是不过瘾
|
r********3 发帖数: 2998 | 20 这不就是传说中的Michael Jordan吗?他怎么只能用牛人来形容啊,他应该可以归结到
神人的地步。他的学生,Andraw N.g这些都超级大牛。他教出来的学生形成了一个“
Jordan系”,把AI最牛的NIPS conference垄断了,从而导致了ICML这些的成长。
看过他好多Machine Learning的paper,他在AI方面的功底,早已经超越的普通人类的
境界。
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 一般人哪有这个毅力啊 : : 1999).
|
|
|
d*e 发帖数: 843 | 21 OMG,快来拜上帝
【在 r********3 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这不就是传说中的Michael Jordan吗?他怎么只能用牛人来形容啊,他应该可以归结到 : 神人的地步。他的学生,Andraw N.g这些都超级大牛。他教出来的学生形成了一个“ : Jordan系”,把AI最牛的NIPS conference垄断了,从而导致了ICML这些的成长。 : 看过他好多Machine Learning的paper,他在AI方面的功底,早已经超越的普通人类的 : 境界。
|
l******e 发帖数: 470 | 22 你讲个不soso的出来
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : so so : has lots of funding
|
l******e 发帖数: 470 | 23 人家讨论的就是ml
你来列下everything的牛人
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : you are too narrow mind. : ML is not everything.
|
b******y 发帖数: 41 | 24 About five years ago, I noticed MJ was not a NAS/MAE member yet despite his
tremendous impact on ML. It is not surprising to see his achievements
finally got recognized now. For those who admire MJ's fame, you might be
surprised that he is not an ACM Fellow yet. It is a fact that ML is not
everything even within CS.
To the best of my knowledge, there are only two polymaths in the modern
science: John Von Neumann and Herbert A. Simon. It is my personal opinion
that everyone has his own threshold |
a****a 发帖数: 98 | 25
his
+ Poincare
superhero.
after
【在 b******y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : About five years ago, I noticed MJ was not a NAS/MAE member yet despite his : tremendous impact on ML. It is not surprising to see his achievements : finally got recognized now. For those who admire MJ's fame, you might be : surprised that he is not an ACM Fellow yet. It is a fact that ML is not : everything even within CS. : To the best of my knowledge, there are only two polymaths in the modern : science: John Von Neumann and Herbert A. Simon. It is my personal opinion : that everyone has his own threshold
|
N**D 发帖数: 10322 | 26 还呼风唤雨,跟黑社会似的
【在 l****g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 估计你不是做 ML 的 : 不然不会不知道 Michael Jordan 的 : 他的学生比如 Andrew Ng 和 Eric Xing 现在都是呼风唤雨的人物了
|
N**D 发帖数: 10322 | 27 垄断?学术难道不是百花齐放?
【在 r********3 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这不就是传说中的Michael Jordan吗?他怎么只能用牛人来形容啊,他应该可以归结到 : 神人的地步。他的学生,Andraw N.g这些都超级大牛。他教出来的学生形成了一个“ : Jordan系”,把AI最牛的NIPS conference垄断了,从而导致了ICML这些的成长。 : 看过他好多Machine Learning的paper,他在AI方面的功底,早已经超越的普通人类的 : 境界。
|
f*******r 发帖数: 383 | 28 感觉前三有点玄,前五差不多。
我心目中的排名:
V. VAPNIK, L. BREIMAN
R. SCHAPIRE ~ L. VALIANT ~ D. HAUSSLER ~ M. JORDAN
【在 n***l 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这个人, 在machine learning领域, 那是超级大牛啊, top3肯定是没问题的.
|
f*******r 发帖数: 383 | 29 学生牛就说明教授牛了?
要知道那些学生本来就是出自MIT或BERKELEY.
【在 P***P 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 无知者无畏 : 牛不牛看他的学生有多少在top10当教授就知道了
|
f*******r 发帖数: 383 | 30 此兄能说会写,雄心和毅力非一般人可比。
但是感觉他自立门户以后做的东西不如以前了。
当然对他还是佩服得紧啊。
1999).
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这个吗? : University of California, Berkeley, Ph.D. in Computer Science (1999–2004). : Research advisors: Profs. Richard Karp, Michael Jordan and Stuart Russell : Rutgers University, Ph.D. in Molecular Biology and Biochemistry (1994–1999). : Research advisor: Prof. Chung S. Yang : Rutgers University, M.Sc. in Computer Science (1996–1998). : Research advisor: Prof. Casimir Kulikowski : Tsinghua University, B.Sc. in Physics and Biology (dual major, 1988–1993). : Research advisor: Prof. Jun Zhao : 实在是佩服啊
|
|
|
f*******r 发帖数: 383 | 31 觉得MJ是牛人但非神人。
他属于领导时代潮流的人,但目前为止他还没有创立出一套完整而深入的理论
体系来,稍微有点遗憾。
【在 r********3 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这不就是传说中的Michael Jordan吗?他怎么只能用牛人来形容啊,他应该可以归结到 : 神人的地步。他的学生,Andraw N.g这些都超级大牛。他教出来的学生形成了一个“ : Jordan系”,把AI最牛的NIPS conference垄断了,从而导致了ICML这些的成长。 : 看过他好多Machine Learning的paper,他在AI方面的功底,早已经超越的普通人类的 : 境界。
|
N**D 发帖数: 10322 | 32 minsky
vapnik
你讲讲MJ最有开创性的工作?
【在 l******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 你讲个不soso的出来
|
l******e 发帖数: 470 | 33 你的bar太高,就turing奖这个级别的不soso,我也没话说
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : minsky : vapnik : 你讲讲MJ最有开创性的工作?
|
l******e 发帖数: 470 | 34 mj很nx了,你遗憾啥啊,替版上wsn遗憾遗憾吧,呵呵。。
【在 f*******r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 觉得MJ是牛人但非神人。 : 他属于领导时代潮流的人,但目前为止他还没有创立出一套完整而深入的理论 : 体系来,稍微有点遗憾。
|
l*******n 发帖数: 1972 | 35 论学术水平,那是top3,论学霸程度,绝对最学霸没有之一,NIPS完全被他掌控,不少
大学的ML方向
都是他的徒子徒孙。操,从这几点来看,这家伙人品真的很差
【在 n***l 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这个人, 在machine learning领域, 那是超级大牛啊, top3肯定是没问题的.
|
r********3 发帖数: 2998 | 36 对啊,他开创的"Jordan系”,基本垄断了AI最牛的NIPS。
结果导致外面的人改投ICML了。从而让ICML蓬勃发展。
一般中国来的,能成为他的学生的学生,都是相当的牛人啊。
【在 l*******n 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 论学术水平,那是top3,论学霸程度,绝对最学霸没有之一,NIPS完全被他掌控,不少 : 大学的ML方向 : 都是他的徒子徒孙。操,从这几点来看,这家伙人品真的很差
|
r********3 发帖数: 2998 | 37 support vector machine,我觉得只是用数学系的quadratic programming来套用在分
类优化问题上吧。做CS的提出这个挺不错的。但是这个作者本身就是做数学出身的啊。
分类模型不是他提出的,同时quadratic programming也不是他发明的。。。
如果这样说起来,M.J.也有他的工作啊。比如说,我看过早年他们做过的active
learning,spectral clustering,虽然都是合作的。。。
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : minsky : vapnik : 你讲讲MJ最有开创性的工作?
|
s******g 发帖数: 3841 | 38 中国人做ML,data mining,PR的多
总以为这几样就是代表AI了
我知道香港某牛校有很多做ML,DM很厉害的教授,但是在美国听到人表扬最多的还是一
个做logic的,一年只发1、2篇文章的教授
【在 r********3 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这不就是传说中的Michael Jordan吗?他怎么只能用牛人来形容啊,他应该可以归结到 : 神人的地步。他的学生,Andraw N.g这些都超级大牛。他教出来的学生形成了一个“ : Jordan系”,把AI最牛的NIPS conference垄断了,从而导致了ICML这些的成长。 : 看过他好多Machine Learning的paper,他在AI方面的功底,早已经超越的普通人类的 : 境界。
|
d*****u 发帖数: 17243 | 39 英国的AI就是logic之类的多
【在 s******g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 中国人做ML,data mining,PR的多 : 总以为这几样就是代表AI了 : 我知道香港某牛校有很多做ML,DM很厉害的教授,但是在美国听到人表扬最多的还是一 : 个做logic的,一年只发1、2篇文章的教授
|
f*******r 发帖数: 383 | 40 你忽略了SVM(或者说机器学习)上的深刻理论工作。
【在 r********3 的大作中提到】![](/moin_static193/solenoid/img/up.png) : support vector machine,我觉得只是用数学系的quadratic programming来套用在分 : 类优化问题上吧。做CS的提出这个挺不错的。但是这个作者本身就是做数学出身的啊。 : 分类模型不是他提出的,同时quadratic programming也不是他发明的。。。 : 如果这样说起来,M.J.也有他的工作啊。比如说,我看过早年他们做过的active : learning,spectral clustering,虽然都是合作的。。。
|
|
|
l********w 发帖数: 253 | 41 Jordan不光学术好,讲课也是一个非常好的老师。 |
s***y 发帖数: 198 | 42 他的水平算不上前三,前五差不多,排在周志华之后,
【在 f*******r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 感觉前三有点玄,前五差不多。 : 我心目中的排名: : V. VAPNIK, L. BREIMAN : R. SCHAPIRE ~ L. VALIANT ~ D. HAUSSLER ~ M. JORDAN
|
d*e 发帖数: 843 | 43
~~~~ 你是鸡丁吗?
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 他的水平算不上前三,前五差不多,排在周志华之后,
|
s******g 发帖数: 3841 | 44 周志华威武
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 他的水平算不上前三,前五差不多,排在周志华之后,
|
N**D 发帖数: 10322 | 45 所以说你还很年轻嘛
在多看看书,多看看paper, 就知道vapnic有多牛了,就知道为啥SVM这么厉害,
spectral clustering, 如果没记错的话,好像最后还是要用k-means吧。说白了,炒作。
类似的想法很早就有,只不过是这个大牛在某次nips提出来,就好象很火。这个大牛的
一个弟子,认为凡是和他们想法不同的就不是spectral clutsering, fourier
analysis 也不是spectral 的。
希望牛人们使劲在nips灌水,别到其它地方害人了。
【在 r********3 的大作中提到】![](/moin_static193/solenoid/img/up.png) : support vector machine,我觉得只是用数学系的quadratic programming来套用在分 : 类优化问题上吧。做CS的提出这个挺不错的。但是这个作者本身就是做数学出身的啊。 : 分类模型不是他提出的,同时quadratic programming也不是他发明的。。。 : 如果这样说起来,M.J.也有他的工作啊。比如说,我看过早年他们做过的active : learning,spectral clustering,虽然都是合作的。。。
|
t*******a 发帖数: 45 | 46 你在讲相声吗?
【在 r********3 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这不就是传说中的Michael Jordan吗?他怎么只能用牛人来形容啊,他应该可以归结到 : 神人的地步。他的学生,Andraw N.g这些都超级大牛。他教出来的学生形成了一个“ : Jordan系”,把AI最牛的NIPS conference垄断了,从而导致了ICML这些的成长。 : 看过他好多Machine Learning的paper,他在AI方面的功底,早已经超越的普通人类的 : 境界。
|
t*******a 发帖数: 45 | 47 周志华得罪你了?
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 他的水平算不上前三,前五差不多,排在周志华之后,
|
f*******r 发帖数: 383 | 48
作。
这个弟子是谁?
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 所以说你还很年轻嘛 : 在多看看书,多看看paper, 就知道vapnic有多牛了,就知道为啥SVM这么厉害, : spectral clustering, 如果没记错的话,好像最后还是要用k-means吧。说白了,炒作。 : 类似的想法很早就有,只不过是这个大牛在某次nips提出来,就好象很火。这个大牛的 : 一个弟子,认为凡是和他们想法不同的就不是spectral clutsering, fourier : analysis 也不是spectral 的。 : 希望牛人们使劲在nips灌水,别到其它地方害人了。
|
G*****7 发帖数: 1759 | 49 svm就是个glorified template matcher,
你还是多看看hinton系的东西吧。
btw 四大系
逻辑系,老jm/mm和子弟;
jordan系;
神经系,hinton, lecun;
svm系,现在基本也就是在英国、欧陆、澳洲有些影响。
作。
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 所以说你还很年轻嘛 : 在多看看书,多看看paper, 就知道vapnic有多牛了,就知道为啥SVM这么厉害, : spectral clustering, 如果没记错的话,好像最后还是要用k-means吧。说白了,炒作。 : 类似的想法很早就有,只不过是这个大牛在某次nips提出来,就好象很火。这个大牛的 : 一个弟子,认为凡是和他们想法不同的就不是spectral clutsering, fourier : analysis 也不是spectral 的。 : 希望牛人们使劲在nips灌水,别到其它地方害人了。
|
G*****7 发帖数: 1759 | 50 f. bach or andrew ng or eric xing
【在 f*******r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : 作。 : 这个弟子是谁?
|
|
|
l******e 发帖数: 470 | 51 恩,讲课一听就是大师的讲法
【在 l********w 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Jordan不光学术好,讲课也是一个非常好的老师。
|
l******e 发帖数: 470 | 52 牛人啊,一个 QP 就把SVM概括了
SVM的书都可以不用写了。
【在 r********3 的大作中提到】![](/moin_static193/solenoid/img/up.png) : support vector machine,我觉得只是用数学系的quadratic programming来套用在分 : 类优化问题上吧。做CS的提出这个挺不错的。但是这个作者本身就是做数学出身的啊。 : 分类模型不是他提出的,同时quadratic programming也不是他发明的。。。 : 如果这样说起来,M.J.也有他的工作啊。比如说,我看过早年他们做过的active : learning,spectral clustering,虽然都是合作的。。。
|
w***s 发帖数: 424 | 53 Jordan的确是引领NIPS的research topic。
他正在写的书,还没写完就已经很多人在期待了...
【在 r********3 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 对啊,他开创的"Jordan系”,基本垄断了AI最牛的NIPS。 : 结果导致外面的人改投ICML了。从而让ICML蓬勃发展。 : 一般中国来的,能成为他的学生的学生,都是相当的牛人啊。
|
I*****2 发帖数: 1586 | 54 所以nips这些年走下坡路了,固然有好文章但是扯蛋的东西也多
citation上面已经不如icml了,越来越多人关注icml了。
【在 l*******n 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 论学术水平,那是top3,论学霸程度,绝对最学霸没有之一,NIPS完全被他掌控,不少 : 大学的ML方向 : 都是他的徒子徒孙。操,从这几点来看,这家伙人品真的很差
|
I*****2 发帖数: 1586 | 55 Agree!
MJ算得上学霸吧,但是单从影响力上看比vapnik差了不止一个量级吧。
vpnik的citation最高的超过1万7,是他自己的书,带动了一个领域发展和影响了若干相关
应用领域;
MJ最高的ciatation也就2k不到吧,而且自己做老板的第三作者paper
这2K里面他徒子徒孙跟着灌水的不少吧。带动了一个领域中某几个topic的发展而已。
这能写教科书的和灌paper的能一起比吗 ...
vpnik对应就是写九阴真经的黄裳
MJ充其量也就是周伯通自创了左右互搏术而已。
作。
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 所以说你还很年轻嘛 : 在多看看书,多看看paper, 就知道vapnic有多牛了,就知道为啥SVM这么厉害, : spectral clustering, 如果没记错的话,好像最后还是要用k-means吧。说白了,炒作。 : 类似的想法很早就有,只不过是这个大牛在某次nips提出来,就好象很火。这个大牛的 : 一个弟子,认为凡是和他们想法不同的就不是spectral clutsering, fourier : analysis 也不是spectral 的。 : 希望牛人们使劲在nips灌水,别到其它地方害人了。
|
I*****2 发帖数: 1586 | 56 我听过MJ讲的也听过vapnik讲的,
对比一下,可能大师称号只能给vapnik,大师讲东西已经脱离形式注重内容,大师讲课
中一边引用哲学家的话语,一边自然而然的联系到实体论等哲学观点。
MJ的也就是technically 非常有insight而已,基本上还是流于形式的高级技术讨论而已
。
【在 l******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 恩,讲课一听就是大师的讲法
|
d*****u 发帖数: 17243 | 57 听起来像是科学与工程的差别
基本上做engineering的不会去关注什么哲学的,也不懂
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 我听过MJ讲的也听过vapnik讲的, : 对比一下,可能大师称号只能给vapnik,大师讲东西已经脱离形式注重内容,大师讲课 : 中一边引用哲学家的话语,一边自然而然的联系到实体论等哲学观点。 : MJ的也就是technically 非常有insight而已,基本上还是流于形式的高级技术讨论而已 : 。
|
d******e 发帖数: 7844 | 58 所以MJ在Statistics里的影响力越来越有限了。
倒是受到很多EECS的追捧。
【在 d*****u 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 听起来像是科学与工程的差别 : 基本上做engineering的不会去关注什么哲学的,也不懂
|
N**D 发帖数: 10322 | 59 glorified?
你搞一个出来
神经网络也是template matcher
graphical model 也是
问题很简单,就是要找个好的template.
【在 G*****7 的大作中提到】![](/moin_static193/solenoid/img/up.png) : svm就是个glorified template matcher, : 你还是多看看hinton系的东西吧。 : btw 四大系 : 逻辑系,老jm/mm和子弟; : jordan系; : 神经系,hinton, lecun; : svm系,现在基本也就是在英国、欧陆、澳洲有些影响。 : : 作。
|
N**D 发帖数: 10322 | 60 这个书好像已经写了至少5,6年了吧
【在 w***s 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Jordan的确是引领NIPS的research topic。 : 他正在写的书,还没写完就已经很多人在期待了...
|
|
|
N**D 发帖数: 10322 | 61 vapnik 是手中无环,心中也无环
mj还在练九阴真经
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 我听过MJ讲的也听过vapnik讲的, : 对比一下,可能大师称号只能给vapnik,大师讲东西已经脱离形式注重内容,大师讲课 : 中一边引用哲学家的话语,一边自然而然的联系到实体论等哲学观点。 : MJ的也就是technically 非常有insight而已,基本上还是流于形式的高级技术讨论而已 : 。
|
f*******r 发帖数: 383 | 62 我觉得刚好相反。
MJ以前在统计领域几乎没有什么影响,现在开始渗透。
这部分是由于Bayesian在统计中的势力慢慢变大,部分
得益于他在伯克利统计系兼职并带学生。
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 所以MJ在Statistics里的影响力越来越有限了。 : 倒是受到很多EECS的追捧。
|
d******e 发帖数: 7844 | 63 我的说法有问题。
准确地说,MJ在Statistics的影响力很有限,倒是受到很多EECS的追捧。
Statistics里面也有很多人做机器学习,但影响力都要比他大。
至于你说的渗透,我没看到啊,Statistics的那几个定期刊根本没有人引他的文章啊。
【在 f*******r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 我觉得刚好相反。 : MJ以前在统计领域几乎没有什么影响,现在开始渗透。 : 这部分是由于Bayesian在统计中的势力慢慢变大,部分 : 得益于他在伯克利统计系兼职并带学生。
|
C*********e 发帖数: 587 | 64 看了后面好多comments。。。汗
首先,machine learning算属于CS下面,但是有自己的圈子,某种意义上above了CS的
圈子,和math, stat,neuro science等,有很多联系,而且是非常紧密的联系。圈子也
是自己建立的,比如NIPS,就是有专门的机构来组织,和IEEE,ACM都没有关系。印象
中,NIPS,ICML,AISTATS,UAI,COLT,这5个会议,都似乎和IEEE/ACM没关系。所以评上一
个ACM的fellow与否,无管紧要。
其次,ML还是相对年轻的学科,像是john lafferty,lawrence saul这样的超级大牛,
40来岁左右而已,而且JL看着也就30多多的样子。hinton老一些,他是
从AI年代就开始做了,不是ML出身。MJ学生这么多了,他自己也就50多吧,不算
很大。有些那种到到了年龄才能评的fellow,自然不会太多
评价一个学者牛否,PhD期间的工作不重要,更关键看他带学生之后的工作,他学生的
出路,声誉等等。综合来看,MJ绝对是超级大牛
SVM的解法可以看成是QP,但是他model里面的large mar
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : ~~~~ 你是鸡丁吗?
|
C*********e 发帖数: 587 | 65 。。。ICML是这几年是水化趋势明显了。NIPS扯淡文章一直就有,从来没有
断过,NIPS牛在出了太多的好文章,好的结果一般prefer在NIPS上发出来
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 所以nips这些年走下坡路了,固然有好文章但是扯蛋的东西也多 : citation上面已经不如icml了,越来越多人关注icml了。
|
G*****7 发帖数: 1759 | 66 正确的解说是
他的graphical models书写了那么多年还没写完。
【在 w***s 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Jordan的确是引领NIPS的research topic。 : 他正在写的书,还没写完就已经很多人在期待了...
|
G*****7 发帖数: 1759 | 67 hinton 60+了
几年前去nips居然有一个workshop是庆祝他60生日。
最早nips几乎是他家人掌握的
【在 C*********e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 看了后面好多comments。。。汗 : 首先,machine learning算属于CS下面,但是有自己的圈子,某种意义上above了CS的 : 圈子,和math, stat,neuro science等,有很多联系,而且是非常紧密的联系。圈子也 : 是自己建立的,比如NIPS,就是有专门的机构来组织,和IEEE,ACM都没有关系。印象 : 中,NIPS,ICML,AISTATS,UAI,COLT,这5个会议,都似乎和IEEE/ACM没关系。所以评上一 : 个ACM的fellow与否,无管紧要。 : 其次,ML还是相对年轻的学科,像是john lafferty,lawrence saul这样的超级大牛, : 40来岁左右而已,而且JL看着也就30多多的样子。hinton老一些,他是 : 从AI年代就开始做了,不是ML出身。MJ学生这么多了,他自己也就50多吧,不算 : 很大。有些那种到到了年龄才能评的fellow,自然不会太多
|
G*****7 发帖数: 1759 | 68
谁搞出来都是。没有中间representation。
好的template是有intermediate rep的
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : glorified? : 你搞一个出来 : 神经网络也是template matcher : graphical model 也是 : 问题很简单,就是要找个好的template.
|
s***y 发帖数: 198 | 69 ML的派系,
周志华的集成学习,天下第一,未来的图灵,据说一个诺贝尔奖的还抄他,可见他的地
位。
SVM,万能药,对许多问题效果都很好,是ML生手的最爱。
BOOSTING。从ADABOOST到ADDITIVE MODEL,理论越来越深,在统计界有较大影响,实用
效果也很好。
PROBABILISTIC GRAPHICAL MODEL。PEARL开山,JORDAN发扬广大,HINTON也可以算,现
在是一大派,现在这一派也比较成熟了。JORDAN的GRAPHICAL MODEL书,电子版我08
年就见过,不知道大家说的是那一本。
【在 G*****7 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 正确的解说是 : 他的graphical models书写了那么多年还没写完。
|
w***g 发帖数: 5958 | 70 我外行,觉得现在真正能够实用的程序就libsvm一个。别的paper里写的那些美好的算
法怎么就没一个拿来能用的软件呢?
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : ML的派系, : 周志华的集成学习,天下第一,未来的图灵,据说一个诺贝尔奖的还抄他,可见他的地 : 位。 : SVM,万能药,对许多问题效果都很好,是ML生手的最爱。 : BOOSTING。从ADABOOST到ADDITIVE MODEL,理论越来越深,在统计界有较大影响,实用 : 效果也很好。 : PROBABILISTIC GRAPHICAL MODEL。PEARL开山,JORDAN发扬广大,HINTON也可以算,现 : 在是一大派,现在这一派也比较成熟了。JORDAN的GRAPHICAL MODEL书,电子版我08 : 年就见过,不知道大家说的是那一本。
|
|
|
r********3 发帖数: 2998 | 71 我记得中国南大还是人大也有个做数据库的教授,做讲座更大师。。。
一来就是从周易开始,从而引入各种计算问题。
刚开始觉得这家伙好牛啊,能把周易都联系起来,一定是个大哲学家。听到最后,你会
发现,这家伙就是一个大忽悠。
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 我听过MJ讲的也听过vapnik讲的, : 对比一下,可能大师称号只能给vapnik,大师讲东西已经脱离形式注重内容,大师讲课 : 中一边引用哲学家的话语,一边自然而然的联系到实体论等哲学观点。 : MJ的也就是technically 非常有insight而已,基本上还是流于形式的高级技术讨论而已 : 。
|
G*****7 发帖数: 1759 | 72 周志华不如香港的Xu Lei
Bayesian Ying-Yang System and Harmony Learning Theory
采撷阴阳,济天下之和谐大成
xu出于jordan而胜于jordan
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : ML的派系, : 周志华的集成学习,天下第一,未来的图灵,据说一个诺贝尔奖的还抄他,可见他的地 : 位。 : SVM,万能药,对许多问题效果都很好,是ML生手的最爱。 : BOOSTING。从ADABOOST到ADDITIVE MODEL,理论越来越深,在统计界有较大影响,实用 : 效果也很好。 : PROBABILISTIC GRAPHICAL MODEL。PEARL开山,JORDAN发扬广大,HINTON也可以算,现 : 在是一大派,现在这一派也比较成熟了。JORDAN的GRAPHICAL MODEL书,电子版我08 : 年就见过,不知道大家说的是那一本。
|
G*****7 发帖数: 1759 | 73
和bishop合写的。早就有draft电子版了,只在几个学校做内部教材。
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : ML的派系, : 周志华的集成学习,天下第一,未来的图灵,据说一个诺贝尔奖的还抄他,可见他的地 : 位。 : SVM,万能药,对许多问题效果都很好,是ML生手的最爱。 : BOOSTING。从ADABOOST到ADDITIVE MODEL,理论越来越深,在统计界有较大影响,实用 : 效果也很好。 : PROBABILISTIC GRAPHICAL MODEL。PEARL开山,JORDAN发扬广大,HINTON也可以算,现 : 在是一大派,现在这一派也比较成熟了。JORDAN的GRAPHICAL MODEL书,电子版我08 : 年就见过,不知道大家说的是那一本。
|
d*e 发帖数: 843 | 74 ....
【在 G*****7 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 周志华不如香港的Xu Lei : Bayesian Ying-Yang System and Harmony Learning Theory : 采撷阴阳,济天下之和谐大成 : xu出于jordan而胜于jordan
|
s***y 发帖数: 198 | 75 XU跟JORDAN做过很短的博后,他是做模式识别出身的,现在在国内影响不大。他根本没
法和周志华比,周的集成学习报了国家自然科学一等奖,基本上是看作和钱学森,冯康
一个级别的成果,现在在国内,做ML而又不捧周志华,没饭吃。等过几年周志华的学生
把牛校都占领了,他就是中国冯诺易曼。
周志华是东方不败级别的,VAPNIK算风清扬,JORDAN顶多是令狐冲,XU算陆大有。
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : ....
|
d*e 发帖数: 843 | 76 你这么捧周志华,他知道吗?要不要帮你转达一下?
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : XU跟JORDAN做过很短的博后,他是做模式识别出身的,现在在国内影响不大。他根本没 : 法和周志华比,周的集成学习报了国家自然科学一等奖,基本上是看作和钱学森,冯康 : 一个级别的成果,现在在国内,做ML而又不捧周志华,没饭吃。等过几年周志华的学生 : 把牛校都占领了,他就是中国冯诺易曼。 : 周志华是东方不败级别的,VAPNIK算风清扬,JORDAN顶多是令狐冲,XU算陆大有。
|
b****g 发帖数: 324 | 77 Hinton is no doubt better than MJ. |
l******e 发帖数: 470 | 78 没听过vapnik,
有视频没给一个?
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 我听过MJ讲的也听过vapnik讲的, : 对比一下,可能大师称号只能给vapnik,大师讲东西已经脱离形式注重内容,大师讲课 : 中一边引用哲学家的话语,一边自然而然的联系到实体论等哲学观点。 : MJ的也就是technically 非常有insight而已,基本上还是流于形式的高级技术讨论而已 : 。
|
f*******r 发帖数: 383 | 79 http://videolectures.net/mlss03_vapnik_ei/
【在 l******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 没听过vapnik, : 有视频没给一个?
|
v******d 发帖数: 1322 | 80 这是夸还是亏
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : XU跟JORDAN做过很短的博后,他是做模式识别出身的,现在在国内影响不大。他根本没 : 法和周志华比,周的集成学习报了国家自然科学一等奖,基本上是看作和钱学森,冯康 : 一个级别的成果,现在在国内,做ML而又不捧周志华,没饭吃。等过几年周志华的学生 : 把牛校都占领了,他就是中国冯诺易曼。 : 周志华是东方不败级别的,VAPNIK算风清扬,JORDAN顶多是令狐冲,XU算陆大有。
|
|
|
d*e 发帖数: 843 | 81 现在去跟Hinton进入ML领域,还有前途么?
【在 b****g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Hinton is no doubt better than MJ.
|
f*******r 发帖数: 383 | 82
开山祖师爷是Hammersley-Clifford吧。
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : ML的派系, : 周志华的集成学习,天下第一,未来的图灵,据说一个诺贝尔奖的还抄他,可见他的地 : 位。 : SVM,万能药,对许多问题效果都很好,是ML生手的最爱。 : BOOSTING。从ADABOOST到ADDITIVE MODEL,理论越来越深,在统计界有较大影响,实用 : 效果也很好。 : PROBABILISTIC GRAPHICAL MODEL。PEARL开山,JORDAN发扬广大,HINTON也可以算,现 : 在是一大派,现在这一派也比较成熟了。JORDAN的GRAPHICAL MODEL书,电子版我08 : 年就见过,不知道大家说的是那一本。
|
s***y 发帖数: 198 | 83 我觉得说ISING开山也行,ISING的工作是获得诺贝尔奖的,是统计物理里的经典。
JORDAN为什么在EECS吃香,因为GRAPHICAL MODEL统一了MRF,HMM,等等。而MRF和HMM
在信号和图像处理上EECS的人用的很多,所以接受JORDAN的东西没困难。总体说,
JORDAN还是偏计算,真正理论的东西不多,统计的人重理论,重模型,对他的东西不感
兴趣。
GRAPHICAL MODEL现在在BIOINFORMATICS上已经站稳了,经过KOLLER,FRIEDMAN,ERIC
XING 这些人的推动,在NATURE,SCIENCE上的文章也用了这种模型,甚至PEER靠这个拿
了NIH的R01,我因为这是GRAPHICAL MODEL最成功的应用。
这个领域我比较偏爱,有一次问了ANDREW YAO,他一把年纪了还做percolation theory
,
【在 f*******r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : 开山祖师爷是Hammersley-Clifford吧。
|
s***y 发帖数: 198 | 84 连诺贝尔奖获得者都抄他的工作,你说他牛不牛,我们这些无名小组能不佩服
【在 v******d 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这是夸还是亏
|
d*e 发帖数: 843 | 85 哈哈,我算是终于看明白了。。。
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 连诺贝尔奖获得者都抄他的工作,你说他牛不牛,我们这些无名小组能不佩服
|
P***P 发帖数: 1387 | 86 连ising都扯上了....
接着可以上CN Yang了.哈哈
HMM
ERIC
theory
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 我觉得说ISING开山也行,ISING的工作是获得诺贝尔奖的,是统计物理里的经典。 : JORDAN为什么在EECS吃香,因为GRAPHICAL MODEL统一了MRF,HMM,等等。而MRF和HMM : 在信号和图像处理上EECS的人用的很多,所以接受JORDAN的东西没困难。总体说, : JORDAN还是偏计算,真正理论的东西不多,统计的人重理论,重模型,对他的东西不感 : 兴趣。 : GRAPHICAL MODEL现在在BIOINFORMATICS上已经站稳了,经过KOLLER,FRIEDMAN,ERIC : XING 这些人的推动,在NATURE,SCIENCE上的文章也用了这种模型,甚至PEER靠这个拿 : 了NIH的R01,我因为这是GRAPHICAL MODEL最成功的应用。 : 这个领域我比较偏爱,有一次问了ANDREW YAO,他一把年纪了还做percolation theory : ,
|
P***P 发帖数: 1387 | 87 这里讨论vapnic跟MJ的, 先把他两的书都看了再说把.
只同意这句话
评价一个学者牛否,PhD期间的工作不重要,更关键看他带学生之后的工作,他学生的
出路,声誉等等。 |
I*****2 发帖数: 1586 | 88 不看他们的书也是可以评价的,否则学术大拿们就跟江湖骗子一个级别了,专门蒙外行
人。
vapnic不怎么带学生,你这个衡量标准是用来评估学霸的。
历史上的学术大牛都是自己做研究不是靠拿学生当stepstone的,按你这个标准MJ比爱
因斯坦还牛逼。
这种级别人物,看看citation就知道他们的影响力了。
vapnic,唯一作者,
The nature of statistical learning theory, citation 超过1万7, 2000年出版的
Statistical learning theory citation 超过1万3, 1998年出版的
MJ, 第三作者,最高citation不到2K
【在 P***P 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这里讨论vapnic跟MJ的, 先把他两的书都看了再说把. : 只同意这句话 : 评价一个学者牛否,PhD期间的工作不重要,更关键看他带学生之后的工作,他学生的 : 出路,声誉等等。
|
j*****n 发帖数: 1545 | 89 我也觉得看一个人牛不牛要看他自己的工作,不是看他学生的出路.
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 不看他们的书也是可以评价的,否则学术大拿们就跟江湖骗子一个级别了,专门蒙外行 : 人。 : vapnic不怎么带学生,你这个衡量标准是用来评估学霸的。 : 历史上的学术大牛都是自己做研究不是靠拿学生当stepstone的,按你这个标准MJ比爱 : 因斯坦还牛逼。 : 这种级别人物,看看citation就知道他们的影响力了。 : vapnic,唯一作者, : The nature of statistical learning theory, citation 超过1万7, 2000年出版的 : Statistical learning theory citation 超过1万3, 1998年出版的 :
|
N**D 发帖数: 10322 | 90 再讨论下去,MJ的徒子徒孙都要跳出来了
【在 j*****n 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 我也觉得看一个人牛不牛要看他自己的工作,不是看他学生的出路.
|
|
|
t*******a 发帖数: 45 | 91 明显是黑周志华的
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 你这么捧周志华,他知道吗?要不要帮你转达一下?
|
p*********g 发帖数: 226 | 92 对于 Vapnik 的书,cite 它的人中有几个真正读过超过10页,几个扫过一下目录,几
个瞄过一眼封面,几个根本连 ebook 都没下载过。 |
N**D 发帖数: 10322 | 93 问题是这样,如果不cite, 说明连这本书都没听说,那paper也别看了。而且, 只要关
于svm, kernel methods, transduction, kernel clustering, vc dimension,
distribution free bound, etc. ... 都可以引用
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 对于 Vapnik 的书,cite 它的人中有几个真正读过超过10页,几个扫过一下目录,几 : 个瞄过一眼封面,几个根本连 ebook 都没下载过。
|
p*********g 发帖数: 226 | 94 很多人其实就是想 cite 一个概念,懒得去查,直接就引 Vapnik 了事 |
p*******o 发帖数: 6791 | 95 原来是 M. J. 的 CV 啊, 这个是牛人啊. |
c**r 发帖数: 108 | 96 对头。
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 很多人其实就是想 cite 一个概念,懒得去查,直接就引 Vapnik 了事
|
G*****7 发帖数: 1759 | 97 hinton老矣,尚能contrastive div否
而且他最近的学生似乎也没什么在北美有影响力的
rus发了片science也才不过是去mit postdog
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 现在去跟Hinton进入ML领域,还有前途么?
|
d******e 发帖数: 7844 | 98 呵呵,这还不说明巨大成功?
【在 c**r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 对头。
|
i*********8 发帖数: 3229 | 99 难道svm 没人用吗?
连svm的一个实现libsvm都被cite了3K多了。
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 对于 Vapnik 的书,cite 它的人中有几个真正读过超过10页,几个扫过一下目录,几 : 个瞄过一眼封面,几个根本连 ebook 都没下载过。
|
p*********g 发帖数: 226 | 100 这说明 citation 远非 iid,所以 bound 很弱,说明不了什么。
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 呵呵,这还不说明巨大成功?
|
|
|
N**D 发帖数: 10322 | 101 比徒子徒孙还是要iid一些
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这说明 citation 远非 iid,所以 bound 很弱,说明不了什么。
|
p*********g 发帖数: 226 | 102 引MJ的人,大多看过他的paper。引Vapnik的人,大多是因为别人引了,又懒得自己查
。而且Vapnik的那本是书,很多东西也是别人的工作。他在苏联发展这项工作的时候,
其实又忽略了很多西方统记界已经有的东西。所以引Vapnik的书,不代表引Vapnik 原
创的工作。
MJ 现在被引的大多是他的paper,所以基本上就是他的工作。
其实说到现在还是漏了两个learning界的巨人:另一个michael,还有Rich Sutton。 |
N**D 发帖数: 10322 | 103 michael who?
其实说巨人吧,Gene Golub, 就是写Matrix Computation, SVD, 很牛地。所有的
machine learning, data mining, 最后都要用。
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 引MJ的人,大多看过他的paper。引Vapnik的人,大多是因为别人引了,又懒得自己查 : 。而且Vapnik的那本是书,很多东西也是别人的工作。他在苏联发展这项工作的时候, : 其实又忽略了很多西方统记界已经有的东西。所以引Vapnik的书,不代表引Vapnik 原 : 创的工作。 : MJ 现在被引的大多是他的paper,所以基本上就是他的工作。 : 其实说到现在还是漏了两个learning界的巨人:另一个michael,还有Rich Sutton。
|
p*********g 发帖数: 226 | 104 Kearns.
Gene Golub,呵呵,还是小众些吧,否则牛顿都要算了,人家发明了微积分。 |
D*****e 发帖数: 761 | 105 是的,他的讲课能让人对ML充满激情,绝非凡人可比啊
【在 l********w 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Jordan不光学术好,讲课也是一个非常好的老师。
|
d******e 发帖数: 7844 | 106 呵呵,你查查Vapnik 92和95年的关于SVM的paper,一个5000多引用,一个接近3000。
SVM在各个领域都有成功的应用,并且已经被大范围推广,MJ有哪个工作可以比肩?
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 引MJ的人,大多看过他的paper。引Vapnik的人,大多是因为别人引了,又懒得自己查 : 。而且Vapnik的那本是书,很多东西也是别人的工作。他在苏联发展这项工作的时候, : 其实又忽略了很多西方统记界已经有的东西。所以引Vapnik的书,不代表引Vapnik 原 : 创的工作。 : MJ 现在被引的大多是他的paper,所以基本上就是他的工作。 : 其实说到现在还是漏了两个learning界的巨人:另一个michael,还有Rich Sutton。
|
p*********g 发帖数: 226 | 107 >> 你查查Vapnik 92和95年的关于SVM的paper,一个5000多引用,一个接近3000。
呵呵,Corinna Cortes 还是挺令人崇拜的,引入soft margin其实是她的idea,Vapnik 在苏联20年就专心 separable 的了。separable SVM 其实 Vapnik 早就在苏联搞得差不多了,到了美国,把这些集大成的精华发在一个地方。要是真的一点点develop着发,就像大多数人一样,就没那么shocking了。
如果真要比citation, MJ 显然要等10年再和 Vapnik 比,毕竟年龄相差20岁了。
graphical model 还有得可以搞,kernel 和 max margin 已经日落西山了。
其实,Vapnik 最大的问题是他忽略了西方统计领域的一些早有的东西,这让统计的人
有点 upset。当然不怪他,毕竟当时在苏联。
感兴趣当年苏联 math programming 界轶事的,推荐这张paper,其实很多是整个苏联科学界的情况:http://www.springerlink.com/content/0byp2upjdgc |
B****x 发帖数: 17 | 108 http://blog.sina.com.cn/s/blog_661c16d00100kc51.html
机器学习大家谈(转贴)(2010-03-17 21:42:19)转载
标签:杂谈 分类:学术科研
闲着无事,想写点一些我所了解的machine learning大家。由于学识浅薄,见识有限,
并且仅局
限于某些领域,一些在NLP及最近很热的生物信息领域活跃的学者我就浅陋无知,所以
不对的地方大
家仅当一笑。
Machine Learning 大家(1):M. I. Jordan
在我的眼里,M Jordan无疑是武林中的泰山北斗。他师出MIT,现在在berkeley坐
镇一方,
在附近的两所名校(加stanford)中都可以说无出其右者,stanford的Daphne Koller
虽然也
声名遐迩,但是和Jordan比还是有一段距离。
Jordan身兼stat和cs两个系的教授,从他身上可以看出Stat和ML的融合。
Jordan 最先专注于mixtures of experts,并迅速奠定了自己的地位,我们哈尔滨
工业大
学的校友徐雷跟他做博后期间,也在这个方向上沾光不少 |
c******r 发帖数: 300 | 109 说到引用,这个文章很夸张
Dempster, A.P.; Laird, N.M.; Rubin, D.B. (1977). "Maximum Likelihood from
Incomplete Data via the EM Algorithm".
citation > 20k
另外Dempster
Covariance selection Biometrics 28, 157-175, 1972
提出了undirected graphical model for Gaussian distribution
可惜没啥人知道这个。。。
MJ也就是把graphical model在cs中应用发扬光大,算不上什么顶级大师吧。
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 不看他们的书也是可以评价的,否则学术大拿们就跟江湖骗子一个级别了,专门蒙外行 : 人。 : vapnic不怎么带学生,你这个衡量标准是用来评估学霸的。 : 历史上的学术大牛都是自己做研究不是靠拿学生当stepstone的,按你这个标准MJ比爱 : 因斯坦还牛逼。 : 这种级别人物,看看citation就知道他们的影响力了。 : vapnic,唯一作者, : The nature of statistical learning theory, citation 超过1万7, 2000年出版的 : Statistical learning theory citation 超过1万3, 1998年出版的 :
|
i*********8 发帖数: 3229 | 110 就目前而言,还真看不出来MJ有什么那得出手的东西20年后人还能记得住。
Vapnik 在苏联20年就专心 separable 的了。separable SVM 其实 Vapnik 早就在苏联
搞得差不多了,到了美国,把这些集大成的精华发在一个地方。要是真的一点点
develop着发,就像大多数人一样,
Vapnik 比,毕竟年龄相差20岁了。
联科学界的情况:http://www.springerlink.com/content/0byp2upjdgc8ycr9/
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : >> 你查查Vapnik 92和95年的关于SVM的paper,一个5000多引用,一个接近3000。 : 呵呵,Corinna Cortes 还是挺令人崇拜的,引入soft margin其实是她的idea,Vapnik 在苏联20年就专心 separable 的了。separable SVM 其实 Vapnik 早就在苏联搞得差不多了,到了美国,把这些集大成的精华发在一个地方。要是真的一点点develop着发,就像大多数人一样,就没那么shocking了。 : 如果真要比citation, MJ 显然要等10年再和 Vapnik 比,毕竟年龄相差20岁了。 : graphical model 还有得可以搞,kernel 和 max margin 已经日落西山了。 : 其实,Vapnik 最大的问题是他忽略了西方统计领域的一些早有的东西,这让统计的人 : 有点 upset。当然不怪他,毕竟当时在苏联。 : 感兴趣当年苏联 math programming 界轶事的,推荐这张paper,其实很多是整个苏联科学界的情况:http://www.springerlink.com/content/0byp2upjdgc
|
|
|
h*******u 发帖数: 15326 | 111 一般人读第二个皮挨着地时候已经妻离子散了
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 一般人哪有这个毅力啊 : : 1999).
|
p*********g 发帖数: 226 | 112 >> 另外Tommi Jaakkola和David Blei也非常厉害,其中Tommi Jaakkola在
mit任教而David Blei在cmu做博后,
>> 数次获得NIPS最佳论文奖,把SVM的最大间隔方法和Markov network的structure结
构结合起来,赫赫有名。
Taskar? Thochantaridis/Altun? |
G*****7 发帖数: 1759 | 113 chinese restaurant process
【在 i*********8 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 就目前而言,还真看不出来MJ有什么那得出手的东西20年后人还能记得住。 : : Vapnik 在苏联20年就专心 separable 的了。separable SVM 其实 Vapnik 早就在苏联 : 搞得差不多了,到了美国,把这些集大成的精华发在一个地方。要是真的一点点 : develop着发,就像大多数人一样, : Vapnik 比,毕竟年龄相差20岁了。 : 联科学界的情况:http://www.springerlink.com/content/0byp2upjdgc8ycr9/
|
N**D 发帖数: 10322 | 114 india buffet process
【在 G*****7 的大作中提到】![](/moin_static193/solenoid/img/up.png) : chinese restaurant process
|
N**D 发帖数: 10322 | 115 摆脱别从国内转这种脑残文章
【在 B****x 的大作中提到】![](/moin_static193/solenoid/img/up.png) : http://blog.sina.com.cn/s/blog_661c16d00100kc51.html : 机器学习大家谈(转贴)(2010-03-17 21:42:19)转载 : 标签:杂谈 分类:学术科研 : 闲着无事,想写点一些我所了解的machine learning大家。由于学识浅薄,见识有限, : 并且仅局 : 限于某些领域,一些在NLP及最近很热的生物信息领域活跃的学者我就浅陋无知,所以 : 不对的地方大 : 家仅当一笑。 : Machine Learning 大家(1):M. I. Jordan : 在我的眼里,M Jordan无疑是武林中的泰山北斗。他师出MIT,现在在berkeley坐
|
N**D 发帖数: 10322 | 116 the essense of svm is "margin", which is a regulazier term
most other methods , first is penalty term, then regularizer term
Vapnik 在苏联20年就专心 separable 的了。separable SVM 其实 Vapnik 早就在苏联
搞得差不多了,到了美国,把这些集大成的精华发在一个地方。要是真的一点点
develop着发,就像大多数人一样,
Vapnik 比,毕竟年龄相差20岁了。
联科学界的情况:http://www.springerlink.com/content/0byp2upjdgc8ycr9/
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : >> 另外Tommi Jaakkola和David Blei也非常厉害,其中Tommi Jaakkola在 : mit任教而David Blei在cmu做博后, : >> 数次获得NIPS最佳论文奖,把SVM的最大间隔方法和Markov network的structure结 : 构结合起来,赫赫有名。 : Taskar? Thochantaridis/Altun?
|
N**D 发帖数: 10322 | 117 或者说忽悠的很激情
【在 D*****e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 是的,他的讲课能让人对ML充满激情,绝非凡人可比啊
|
N**D 发帖数: 10322 | 118 这个个搞graphical model的说起svm, 别说"notthing but ...", "can be obtained
from this .... prob model..." etc
有本事提出个更好的
SVM很运气,根本没有对应的noise model
Vapnik 在苏联20年就专心 separable 的了。separable SVM 其实 Vapnik 早就在苏联
搞得差不多了,到了美国,把这些集大成的精华发在一个地方。要是真的一点点
develop着发,就像大多数人一样,
Vapnik 比,毕竟年龄相差20岁了。
联科学界的情况:http://www.springerlink.com/content/0byp2upjdgc8ycr9/
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : >> 另外Tommi Jaakkola和David Blei也非常厉害,其中Tommi Jaakkola在 : mit任教而David Blei在cmu做博后, : >> 数次获得NIPS最佳论文奖,把SVM的最大间隔方法和Markov network的structure结 : 构结合起来,赫赫有名。 : Taskar? Thochantaridis/Altun?
|
N**D 发帖数: 10322 | 119 and mexico grill process
【在 G*****7 的大作中提到】![](/moin_static193/solenoid/img/up.png) : chinese restaurant process
|
p*********g 发帖数: 226 | 120 kernel 用在 SVM 也不是 Vapnik 的idea。
margin 这个东东其实统计、规划里早就有了。
当然话说回来,graphical model 里的很多东西统计里也早就有了,machine learning
的人把它发扬光大。
不讨论了。 |
|
|
i*********8 发帖数: 3229 | 121 不讨论了对你有好处。
MJ虽然是个牛人,但从学术影响上真是不到vapnik一根毛。
learning
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : kernel 用在 SVM 也不是 Vapnik 的idea。 : margin 这个东东其实统计、规划里早就有了。 : 当然话说回来,graphical model 里的很多东西统计里也早就有了,machine learning : 的人把它发扬光大。 : 不讨论了。
|
N**D 发帖数: 10322 | 122 是啊
【在 i*********8 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 不讨论了对你有好处。 : MJ虽然是个牛人,但从学术影响上真是不到vapnik一根毛。 : : learning
|
N**D 发帖数: 10322 | 123 margin?
I need a rigous proof relating the generlaization performance of a
clasisifer
learning
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : kernel 用在 SVM 也不是 Vapnik 的idea。 : margin 这个东东其实统计、规划里早就有了。 : 当然话说回来,graphical model 里的很多东西统计里也早就有了,machine learning : 的人把它发扬光大。 : 不讨论了。
|
d******e 发帖数: 7844 | 124 估计这些人大部分就是看过个SVM的Tutorial,没几个人认真读过Learning Theory的东
西。
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : margin? : I need a rigous proof relating the generlaization performance of a : clasisifer : : learning
|
d******e 发帖数: 7844 | 125 Kernel的确是Grace Wahba最先用在Spline中的,但根本没几个人重视,呵呵。
你们说MJ把Graphical Model发扬光大,凭什么不允许Vapnik去光大RKHS?
learning
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : kernel 用在 SVM 也不是 Vapnik 的idea。 : margin 这个东东其实统计、规划里早就有了。 : 当然话说回来,graphical model 里的很多东西统计里也早就有了,machine learning : 的人把它发扬光大。 : 不讨论了。
|
q*w 发帖数: 313 | 126 大家说说MJ到底把pearl
的理论往前推了多少吧?
我看J Pearl的书有种顿悟的感觉。
为什么看MJ的东西从来没这种感觉?
我觉得Pearl是可以和Vapnik放在一起说的。
MJ还是差一些。
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Kernel的确是Grace Wahba最先用在Spline中的,但根本没几个人重视,呵呵。 : 你们说MJ把Graphical Model发扬光大,凭什么不允许Vapnik去光大RKHS? : : learning
|
N**D 发帖数: 10322 | 127 MJ 就是一有很多funding的prof而已
【在 q*w 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 大家说说MJ到底把pearl : 的理论往前推了多少吧? : 我看J Pearl的书有种顿悟的感觉。 : 为什么看MJ的东西从来没这种感觉? : 我觉得Pearl是可以和Vapnik放在一起说的。 : MJ还是差一些。
|
f*******r 发帖数: 383 | 128 Wahba也就是歪打正招吧,等SVM热起来了她才又回过头去炒冷饭。
她的那篇71文章无非是证明了光滑spline(或是基于某种regularization
的问题,她并没有提出regularization这个观念而只是考虑了
光滑spline那类特例)的解以某种形式存在,对generalization
并没有触及。svm配上rkhs恰好可以用她以前的结果。
vapnik最本质的贡献并不是光大rkhs而是通过vc维数给出了基于
ERM 这类学习方法的一个理论刻划。SVM恰好是他这套理论的第
一个实例。
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Kernel的确是Grace Wahba最先用在Spline中的,但根本没几个人重视,呵呵。 : 你们说MJ把Graphical Model发扬光大,凭什么不允许Vapnik去光大RKHS? : : learning
|
f*******r 发帖数: 383 | 129
统计中哪些结果被vapnik忽略了?
他和Chervonenkis的理论1971年就基本奠基了。
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 引MJ的人,大多看过他的paper。引Vapnik的人,大多是因为别人引了,又懒得自己查 : 。而且Vapnik的那本是书,很多东西也是别人的工作。他在苏联发展这项工作的时候, : 其实又忽略了很多西方统记界已经有的东西。所以引Vapnik的书,不代表引Vapnik 原 : 创的工作。 : MJ 现在被引的大多是他的paper,所以基本上就是他的工作。 : 其实说到现在还是漏了两个learning界的巨人:另一个michael,还有Rich Sutton。
|
I*****2 发帖数: 1586 | 130 这几个MJ的fans可能太嫩了
不知道Vapnik–Chervonenkis theory 被普遍认为 "fundamental theory of learning
"
【在 f*******r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : 统计中哪些结果被vapnik忽略了? : 他和Chervonenkis的理论1971年就基本奠基了。
|
|
|
q*w 发帖数: 313 | 131 总结一下。其实就是时髦与深刻之争。
learning
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这几个MJ的fans可能太嫩了 : 不知道Vapnik–Chervonenkis theory 被普遍认为 "fundamental theory of learning : "
|
D***r 发帖数: 7511 | 132 做理论的看不起做应用的,所有学科都是如此
【在 q*w 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 总结一下。其实就是时髦与深刻之争。 : : learning
|
q*w 发帖数: 313 | 133 不是这样。
理论和应用只是研究的两个方向。
深刻与肤浅这个维度基本和前面的那个空间正交。
所以,不是看不起的问题,而是深刻程度不够。
应用做的好的人,完全可以鄙视推了一堆公式,自己都不理解含义的人。
【在 D***r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 做理论的看不起做应用的,所有学科都是如此
|
p*********g 发帖数: 226 | 134 本来不想再讨论了,有几点看来还是讲讲明白。
Vapnik 如果不到美国,估计 SVM 远不会像现在这么成功,他做了20年的separable,
单单这个在实用中基本不会work。让它真正实用的关键的两步:一是Cortes的 soft
margin,二是 Guyon 的 kernelization (Grace Wahba 不能算),两个都是 Vapnik
在 AT&T 的同事。
Vapnik 和 Chervonenkis 在统计学习的贡献自是有目共睹,但很多我们现在看到的SVM
和 max margin 的成果其实来自于许多人共同努力,名字想得到的就有Cortes, Guyon
, Shaw-Taylor, Schoekopf, Smola, Bartlett 等一长串。 所以不能把这些全都归于
Vapnik 一人。当然这点其实并不重要,东西好就行了。
一项工作的意思随着时间的变化而变化。在没有计算机的年代,自然所有这些 machine
learning 的东西都没有什么实用意义。在我们这个年代,frequentist 的方法自然会
盛行,因为我们有了_一定的_计算能力。随着计算技术的 |
N**D 发帖数: 10322 | 135 还Bayesian
现在计算机那么厉害,有没有看看最大可解多大的问题? what is prior? why choose
one prior over another???? well, I know hyper prior?
当然,graphical model最好的地方是可以无限制灌水, Chinese resturant, India
buffeet, Mexico grill, you name it
再说,知道啥时ground breaking?
那些结合bayes 的bound, TTI的几个人做的,很牵强。最重要的,没有导致一个新的算
法,比如SVM.
SVM
Guyon
machine
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 本来不想再讨论了,有几点看来还是讲讲明白。 : Vapnik 如果不到美国,估计 SVM 远不会像现在这么成功,他做了20年的separable, : 单单这个在实用中基本不会work。让它真正实用的关键的两步:一是Cortes的 soft : margin,二是 Guyon 的 kernelization (Grace Wahba 不能算),两个都是 Vapnik : 在 AT&T 的同事。 : Vapnik 和 Chervonenkis 在统计学习的贡献自是有目共睹,但很多我们现在看到的SVM : 和 max margin 的成果其实来自于许多人共同努力,名字想得到的就有Cortes, Guyon : , Shaw-Taylor, Schoekopf, Smola, Bartlett 等一长串。 所以不能把这些全都归于 : Vapnik 一人。当然这点其实并不重要,东西好就行了。 : 一项工作的意思随着时间的变化而变化。在没有计算机的年代,自然所有这些 machine
|
N**D 发帖数: 10322 | 136 MJ的学生很擅长总结,发挥, 吹
根本不解决实际问题,
【在 q*w 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 总结一下。其实就是时髦与深刻之争。 : : learning
|
N**D 发帖数: 10322 | 137 这个强调SVM的成功在于soft margin 和kernel, 说明还需要看书,再研究研究。
再说这个frequentist, 实际中,用的很多,效果很好, generalized linear model.
well, you Bayes guy can see "we can get this from this this and that that
grphacial model, with this set of bullsh*t prior"
SVM
Guyon
machine
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 本来不想再讨论了,有几点看来还是讲讲明白。 : Vapnik 如果不到美国,估计 SVM 远不会像现在这么成功,他做了20年的separable, : 单单这个在实用中基本不会work。让它真正实用的关键的两步:一是Cortes的 soft : margin,二是 Guyon 的 kernelization (Grace Wahba 不能算),两个都是 Vapnik : 在 AT&T 的同事。 : Vapnik 和 Chervonenkis 在统计学习的贡献自是有目共睹,但很多我们现在看到的SVM : 和 max margin 的成果其实来自于许多人共同努力,名字想得到的就有Cortes, Guyon : , Shaw-Taylor, Schoekopf, Smola, Bartlett 等一长串。 所以不能把这些全都归于 : Vapnik 一人。当然这点其实并不重要,东西好就行了。 : 一项工作的意思随着时间的变化而变化。在没有计算机的年代,自然所有这些 machine
|
p*********g 发帖数: 226 | 138 > 这个强调SVM的成功在于soft margin 和kernel, 说明还需要看书,再研究研究。
你这个是完全的误解,这里很多人就是喜欢只及一点、不及其余。最后一次 respond
to you。
这些和 Vapnik 的东西都是缺一不可、相辅相成的。在实用上,没有soft margin 和
kernel,没有可能 work,也就不可能在90年代中叶把龙头从 neural network 那里扳
过来,SVM 也不会有多少人用。但这并不损害 Vapnik 学习理论的价值,而且显然这个比soft margin 和 kernel 更重要。 |
I*****2 发帖数: 1586 | 139 还把svm的成功归功于来到美国,太tmd 搞笑了。
按你这个讨论评估MJ的话,那他就更没啥拿得出手的贡献。
SVM
Guyon
machine
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 本来不想再讨论了,有几点看来还是讲讲明白。 : Vapnik 如果不到美国,估计 SVM 远不会像现在这么成功,他做了20年的separable, : 单单这个在实用中基本不会work。让它真正实用的关键的两步:一是Cortes的 soft : margin,二是 Guyon 的 kernelization (Grace Wahba 不能算),两个都是 Vapnik : 在 AT&T 的同事。 : Vapnik 和 Chervonenkis 在统计学习的贡献自是有目共睹,但很多我们现在看到的SVM : 和 max margin 的成果其实来自于许多人共同努力,名字想得到的就有Cortes, Guyon : , Shaw-Taylor, Schoekopf, Smola, Bartlett 等一长串。 所以不能把这些全都归于 : Vapnik 一人。当然这点其实并不重要,东西好就行了。 : 一项工作的意思随着时间的变化而变化。在没有计算机的年代,自然所有这些 machine
|
I*****2 发帖数: 1586 | 140 那个加拿大的是MJ的学生吗?
我看徒孙顶多,吹得不着边啊。
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : MJ的学生很擅长总结,发挥, 吹 : 根本不解决实际问题,
|
|
|
I*****2 发帖数: 1586 | 141 你应该学会怎么藏拙
个比soft margin 和 kernel 更重要。
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : > 这个强调SVM的成功在于soft margin 和kernel, 说明还需要看书,再研究研究。 : 你这个是完全的误解,这里很多人就是喜欢只及一点、不及其余。最后一次 respond : to you。 : 这些和 Vapnik 的东西都是缺一不可、相辅相成的。在实用上,没有soft margin 和 : kernel,没有可能 work,也就不可能在90年代中叶把龙头从 neural network 那里扳 : 过来,SVM 也不会有多少人用。但这并不损害 Vapnik 学习理论的价值,而且显然这个比soft margin 和 kernel 更重要。
|
p*********g 发帖数: 226 | 142 >> 按你这个讨论评估MJ的话,那他就更没啥拿得出手的贡献。
这点从现在看,MJ 显然不能跟 Vapnik 比,不过人家还年轻,而且计算技术的发展将
来如何还不一定。
如果要看 Bayes 的应用,nando 有一些。还有号称最大的 Bayes application 是微软
剑桥研究院搞的 TrueSkill,Xbox 里面用得好好的。 |
p*********g 发帖数: 226 | 143 俺本来也没兴趣比较 Vapnik 和 MJ,没什么意思。
好了,事实都摆在那儿了,见仁见智。你这种就没意思了,回你的 ChinaNews 谩骂去
吧。
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 你应该学会怎么藏拙 : : 个比soft margin 和 kernel 更重要。
|
I*****2 发帖数: 1586 | 144 最后一句就是你的水平,哈哈。
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 俺本来也没兴趣比较 Vapnik 和 MJ,没什么意思。 : 好了,事实都摆在那儿了,见仁见智。你这种就没意思了,回你的 ChinaNews 谩骂去 : 吧。
|
p*********g 发帖数: 226 | 145 竞猜一下,为什么这个语法错误的句子没人去纠正。呵呵,其实是故意的。 |
c******r 发帖数: 300 | 146 Come on,
graphical model != Bayes
generalized linear model != frequentist
learn sme basic stat first before pouring this kind of groundless comments.
.
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这个强调SVM的成功在于soft margin 和kernel, 说明还需要看书,再研究研究。 : 再说这个frequentist, 实际中,用的很多,效果很好, generalized linear model. : well, you Bayes guy can see "we can get this from this this and that that : grphacial model, with this set of bullsh*t prior" : : SVM : Guyon : machine
|
l******e 发帖数: 470 | 147 没想到frequentist和bayesian吵到这个版上了
难得,搬个小板凳
.
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这个强调SVM的成功在于soft margin 和kernel, 说明还需要看书,再研究研究。 : 再说这个frequentist, 实际中,用的很多,效果很好, generalized linear model. : well, you Bayes guy can see "we can get this from this this and that that : grphacial model, with this set of bullsh*t prior" : : SVM : Guyon : machine
|
p*********g 发帖数: 226 | 148 呵呵,让它们去争吧,他们会说“不过是举个例子”等等。
反正俺无意非要说哪个方法好,哪个差,各有优劣。只要清楚认识到 SVM state of
the art 是很多人智慧的结晶就行了。等到计算机发展到高维积分变成小菜一蝶的时候
,Bayes自然就会更 popular。
还有,大家讨论问题语气平缓些,有话好好说。
【在 c******r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Come on, : graphical model != Bayes : generalized linear model != frequentist : learn sme basic stat first before pouring this kind of groundless comments. : : .
|
l******e 发帖数: 470 | 149
等到计算机发展到高维积分变成小菜一蝶的时候
~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~请预测一下这一天啥时候到来,让我有个盼头
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 呵呵,让它们去争吧,他们会说“不过是举个例子”等等。 : 反正俺无意非要说哪个方法好,哪个差,各有优劣。只要清楚认识到 SVM state of : the art 是很多人智慧的结晶就行了。等到计算机发展到高维积分变成小菜一蝶的时候 : ,Bayes自然就会更 popular。 : 还有,大家讨论问题语气平缓些,有话好好说。
|
p*********g 发帖数: 226 | 150 听说quantum 有戏,哈哈,听说而已。
其实真的运算能力强到 approximate inference 足够的程度也就行了。比如现实中很
多 NP-hard 问题的近似解就已经相当不错了。
【在 l******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : 等到计算机发展到高维积分变成小菜一蝶的时候 : ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~请预测一下这一天啥时候到来,让我有个盼头
|
|
|
l******e 发帖数: 470 | 151 等新算法吧,等计算机速度这是没边的事儿
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 听说quantum 有戏,哈哈,听说而已。 : 其实真的运算能力强到 approximate inference 足够的程度也就行了。比如现实中很 : 多 NP-hard 问题的近似解就已经相当不错了。
|
p*********g 发帖数: 226 | 152 两边一块儿等,呵呵。
【在 l******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 等新算法吧,等计算机速度这是没边的事儿
|
t******a 发帖数: 1200 | 153 http://en.wikipedia.org/wiki/All_your_base_are_belong_to_us
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 竞猜一下,为什么这个语法错误的句子没人去纠正。呵呵,其实是故意的。
|
G*****7 发帖数: 1759 | 154 all your bases are belong to us.
google it.
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 竞猜一下,为什么这个语法错误的句子没人去纠正。呵呵,其实是故意的。
|
G*****7 发帖数: 1759 | |
p*********g 发帖数: 226 | |
N**D 发帖数: 10322 | 157 do you know how to read?
Come on,
graphical model != Bayes
generalized linear model != frequentist
learn sme basic stat first before pouring this kind of groundless comments.
.
【在 c******r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Come on, : graphical model != Bayes : generalized linear model != frequentist : learn sme basic stat first before pouring this kind of groundless comments. : : .
|
N**D 发帖数: 10322 | 158 高维积分,和curse of dimensionality (which is solved by vc dimension),
problem formulation are wrong
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 呵呵,让它们去争吧,他们会说“不过是举个例子”等等。 : 反正俺无意非要说哪个方法好,哪个差,各有优劣。只要清楚认识到 SVM state of : the art 是很多人智慧的结晶就行了。等到计算机发展到高维积分变成小菜一蝶的时候 : ,Bayes自然就会更 popular。 : 还有,大家讨论问题语气平缓些,有话好好说。
|
q*w 发帖数: 313 | 159 部分同意。
高维积分,算法上不改进,计算机再快也没有用。
指数增长的算法,不是计算机快就可以解决问题的。
为什么说curse of dimensionality是formulation is wrong?
这个问题确实存在。只是谁也不知道怎么解。
甚至,我很悲观的认为,可能解的方法最近很难出来。
问问搞数学的就知道了。一个数学教授和我说,高维的优化,还是很困难。
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 高维积分,和curse of dimensionality (which is solved by vc dimension), : problem formulation are wrong
|
N**D 发帖数: 10322 | 160 我的理解是这样的
curse of dimenionality 的最初来源是density estimation, which is fundamental
problem in almost all engineering. In parametric form such as linear model,
it is believed that the number of data required is exponential of the number
of free parameters.
However, what VC dimension shows is that, the above understanding is not
correct, after taking into consideration the problem we want to solve.
For example, for classification, it is NOT true that "the fewer the number
of free parameters ", "the le
【在 q*w 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 部分同意。 : 高维积分,算法上不改进,计算机再快也没有用。 : 指数增长的算法,不是计算机快就可以解决问题的。 : 为什么说curse of dimensionality是formulation is wrong? : 这个问题确实存在。只是谁也不知道怎么解。 : 甚至,我很悲观的认为,可能解的方法最近很难出来。 : 问问搞数学的就知道了。一个数学教授和我说,高维的优化,还是很困难。
|
|
|
q*w 发帖数: 313 | 161 你的意思是说,feature 足够好,不用那么复杂高维的分类器,对吧?
问题是,现在很多问题,找好的feature,很难。
如果做分类的说,你feature要好。
提feature的人说,你的分类器要强大。
这就成了chicken-egg问题了。
事实上,处理很多高维问题,现存的方法也还可以。
比如Linear SVM.....
可以用,但不完美。但是总比没有用的好。
这也是我这么崇拜Vapnik的原因了。
fundamental
model,
number
not
number
sin(ax)
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 我的理解是这样的 : curse of dimenionality 的最初来源是density estimation, which is fundamental : problem in almost all engineering. In parametric form such as linear model, : it is believed that the number of data required is exponential of the number : of free parameters. : However, what VC dimension shows is that, the above understanding is not : correct, after taking into consideration the problem we want to solve. : For example, for classification, it is NOT true that "the fewer the number : of free parameters ", "the le
|
r*y 发帖数: 706 | 162
NIPS=Neural Information Processing Systems?
http://books.nips.cc/nips22.html
【在 C*********e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 。。。ICML是这几年是水化趋势明显了。NIPS扯淡文章一直就有,从来没有 : 断过,NIPS牛在出了太多的好文章,好的结果一般prefer在NIPS上发出来
|
m****t 发帖数: 555 | 163 还真有人把SVM捧上了天。
在工业界,复杂的费时的算法很少用到的。
越是简单的,用的越多。 |
l******e 发帖数: 470 | 164 您老给我科普科普工业界用的简单高校的svm的替代品
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 还真有人把SVM捧上了天。 : 在工业界,复杂的费时的算法很少用到的。 : 越是简单的,用的越多。
|
m****t 发帖数: 555 | 165
这不是什么替代品的问题。SVM理论上好像很NB,但在工业上处理实际数据还赶不上
naive bayes 和 knn,至少就我所知的在实际中spam filtering是如此,因为我就是做
这个的。
naive bayes是用的最广的,没有原因,就是最成熟,最简单,最快,最容易实现。这
一点够了。
所以理论和实践是脱节的。
【在 l******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 您老给我科普科普工业界用的简单高校的svm的替代品
|
d******e 发帖数: 7844 | 166 你这种抬杠没什么营养。
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : 这不是什么替代品的问题。SVM理论上好像很NB,但在工业上处理实际数据还赶不上 : naive bayes 和 knn,至少就我所知的在实际中spam filtering是如此,因为我就是做 : 这个的。 : naive bayes是用的最广的,没有原因,就是最成熟,最简单,最快,最容易实现。这 : 一点够了。 : 所以理论和实践是脱节的。
|
m****t 发帖数: 555 | 167
这怎么是抬扛了?
靠理论上捧起来的东西,靠一些toy data的实验来说明性能多好的东西,在实际应用上
效果不怎么样,本身就说明了失败。
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 你这种抬杠没什么营养。
|
m****t 发帖数: 555 | 168 实践证明,理论上看起来很好的东西,实践中往往赶不上简单有效的方法。
看看前几年,我记得是2007 kdd cup优胜者用的什么方法,足以把一帮研究machine
learning新算法的人羞死。
这就是以拙胜巧,以简胜繁。 |
d******e 发帖数: 7844 | 169 说来说去,不还都是那点东西。你也没啥不得了的观点。
你以为现在的这些实用的模型都是一步到位的?不还是发展了几十年甚至上百年才成型
的。
科研本来99.99%都是炮灰,为的就是那0.01%的成果,人们要都是你这个想法,科学就
没得进步了。
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 实践证明,理论上看起来很好的东西,实践中往往赶不上简单有效的方法。 : 看看前几年,我记得是2007 kdd cup优胜者用的什么方法,足以把一帮研究machine : learning新算法的人羞死。 : 这就是以拙胜巧,以简胜繁。
|
d******e 发帖数: 7844 | 170 别把工业界捧得那么高,呵呵,说到底你也就是个技工而已。
SVM在生物医学的圈子里已经遍地开花了,别说人家华而不实,人家自娱自乐比你High
多了。
话说回来,瞧不起SVM的话,你就去弄点新东西,弄一个比SVM好的,大家肯定都来捧你。
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 实践证明,理论上看起来很好的东西,实践中往往赶不上简单有效的方法。 : 看看前几年,我记得是2007 kdd cup优胜者用的什么方法,足以把一帮研究machine : learning新算法的人羞死。 : 这就是以拙胜巧,以简胜繁。
|
|
|
w***g 发帖数: 5958 | 171 SVM好用尽人皆知。如果没有别的背景信息的前提下,第一个试的就是SVM。Meghat的帖
子好歹让大家知道了对spam filtering来说naive bayes有可能比SVM好用。spam
filtering是一个很重要的应用, 所以我觉得Meghat的帖子还是很有价值的。
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 说来说去,不还都是那点东西。你也没啥不得了的观点。 : 你以为现在的这些实用的模型都是一步到位的?不还是发展了几十年甚至上百年才成型 : 的。 : 科研本来99.99%都是炮灰,为的就是那0.01%的成果,人们要都是你这个想法,科学就 : 没得进步了。
|
d******e 发帖数: 7844 | 172 ...你修Machine Learning课的时候,难道老师没提过么?Naive Bayes的一个典型的应
用实例就是Spam filtering,这个用不着他来告诉大家吧。
【在 w***g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : SVM好用尽人皆知。如果没有别的背景信息的前提下,第一个试的就是SVM。Meghat的帖 : 子好歹让大家知道了对spam filtering来说naive bayes有可能比SVM好用。spam : filtering是一个很重要的应用, 所以我觉得Meghat的帖子还是很有价值的。
|
m****t 发帖数: 555 | 173
High
你。
别胡吹什么生物医学了,分子生物学就是最大的伪科学。
那垃圾东西,基本都是骗钱的。
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 别把工业界捧得那么高,呵呵,说到底你也就是个技工而已。 : SVM在生物医学的圈子里已经遍地开花了,别说人家华而不实,人家自娱自乐比你High : 多了。 : 话说回来,瞧不起SVM的话,你就去弄点新东西,弄一个比SVM好的,大家肯定都来捧你。
|
m****t 发帖数: 555 | 174
算了吧。我上machine leaning课的时候,你还不知道在哪呢。
我发顶级会议文章,有纯理论推倒和定理的时候,你还不知道在干啥呢。
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : ...你修Machine Learning课的时候,难道老师没提过么?Naive Bayes的一个典型的应 : 用实例就是Spam filtering,这个用不着他来告诉大家吧。
|
m****t 发帖数: 555 | 175
SVM只是理论上有那么一套。实践中的数据和做研究的数据差别很大。
不说其他的,垃圾邮件过滤,knn效果就比naive bayes好,都比SVM好。
【在 w***g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : SVM好用尽人皆知。如果没有别的背景信息的前提下,第一个试的就是SVM。Meghat的帖 : 子好歹让大家知道了对spam filtering来说naive bayes有可能比SVM好用。spam : filtering是一个很重要的应用, 所以我觉得Meghat的帖子还是很有价值的。
|
d******e 发帖数: 7844 | 176 你也就这点能耐了,估计你也只能用用KNN或者Naive Bayes。
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : SVM只是理论上有那么一套。实践中的数据和做研究的数据差别很大。 : 不说其他的,垃圾邮件过滤,knn效果就比naive bayes好,都比SVM好。
|
d******e 发帖数: 7844 | 177 呵呵,没看出来,大侠把你的文章贴出来看看吧,看看你的影响力和SVM比如何。
KNN,Naive Bayes在你那里再NB也不是你自己的东西,做点NB的东西给大家看看,别总
一天SVM不行,SVM不行的,耍嘴皮子谁不会啊,亮亮你的真本事啊。
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : SVM只是理论上有那么一套。实践中的数据和做研究的数据差别很大。 : 不说其他的,垃圾邮件过滤,knn效果就比naive bayes好,都比SVM好。
|
m****t 发帖数: 555 | 178
哈哈。
你一小P孩 ,刚接触了几天machine learning就不知道天高地厚了。
别装B.
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 你也就这点能耐了,估计你也只能用用KNN或者Naive Bayes。
|
d******e 发帖数: 7844 | 179 也不知道谁最先开始装B的。
别人捧一捧SVM,你就不爽?
NB的话,你找人家Vapnik去较劲。
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : 哈哈。 : 你一小P孩 ,刚接触了几天machine learning就不知道天高地厚了。 : 别装B.
|
m****t 发帖数: 555 | 180
文章就不贴了吧。不想被人肉。
不过ijcai两篇,而且是有理论推导的,应该不差吧。
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 呵呵,没看出来,大侠把你的文章贴出来看看吧,看看你的影响力和SVM比如何。 : KNN,Naive Bayes在你那里再NB也不是你自己的东西,做点NB的东西给大家看看,别总 : 一天SVM不行,SVM不行的,耍嘴皮子谁不会啊,亮亮你的真本事啊。
|
|
|
m****t 发帖数: 555 | 181
我有权利发表我的看法,关你 什么事了?
一看到说SVM不行,跟挖了你 祖坟似的?
莫非Vapnik是你 爷爷?
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 也不知道谁最先开始装B的。 : 别人捧一捧SVM,你就不爽? : NB的话,你找人家Vapnik去较劲。
|
d******e 发帖数: 7844 | 182 我也有权利发表我的看法啊。
说你装B,难道不对么?哈哈哈
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : 我有权利发表我的看法,关你 什么事了? : 一看到说SVM不行,跟挖了你 祖坟似的? : 莫非Vapnik是你 爷爷?
|
d******e 发帖数: 7844 | 183 来啊,贴出来看看,让大家看看到底多理论,装B就装到底,半路气馁,难道你肾亏?
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : 我有权利发表我的看法,关你 什么事了? : 一看到说SVM不行,跟挖了你 祖坟似的? : 莫非Vapnik是你 爷爷?
|
m****t 发帖数: 555 | 184
好啊。
我说你 是Vapnik私生子,是婊子养的,这就是我的看法。
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 我也有权利发表我的看法啊。 : 说你装B,难道不对么?哈哈哈
|
m****t 发帖数: 555 | 185 某人把Vapnik捧上了天,原来是私生子。
可怜啊,Vapnik都没承认你,你还去给人舔屁股。 |
I*****2 发帖数: 1586 | 186 说了半天果然是个半瓶醋,IJCAI也来得瑟,也太贻笑大方了。
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 某人把Vapnik捧上了天,原来是私生子。 : 可怜啊,Vapnik都没承认你,你还去给人舔屁股。
|
I*****2 发帖数: 1586 | 187 就这德行啊,我都后悔我回了你的帖。
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 某人把Vapnik捧上了天,原来是私生子。 : 可怜啊,Vapnik都没承认你,你还去给人舔屁股。
|
h***e 发帖数: 20195 | 188 老夫举例说个其他领域的一个更牛的,MIT的ROBERT LANGER
【在 r********3 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这不就是传说中的Michael Jordan吗?他怎么只能用牛人来形容啊,他应该可以归结到 : 神人的地步。他的学生,Andraw N.g这些都超级大牛。他教出来的学生形成了一个“ : Jordan系”,把AI最牛的NIPS conference垄断了,从而导致了ICML这些的成长。 : 看过他好多Machine Learning的paper,他在AI方面的功底,早已经超越的普通人类的 : 境界。
|
l******e 发帖数: 470 | 189 你的意思是machine learning已经研究完了,大家都可以转行了吧。
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 实践证明,理论上看起来很好的东西,实践中往往赶不上简单有效的方法。 : 看看前几年,我记得是2007 kdd cup优胜者用的什么方法,足以把一帮研究machine : learning新算法的人羞死。 : 这就是以拙胜巧,以简胜繁。
|
o****o 发帖数: 8077 | 190 Dempster and Rubin at Harvard, super Cow in Stat ah....any methods build on
EM will have to cite their '77 paper, as well as a '83 paper by Liu which
proves existence of local ML solution
【在 c******r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 说到引用,这个文章很夸张 : Dempster, A.P.; Laird, N.M.; Rubin, D.B. (1977). "Maximum Likelihood from : Incomplete Data via the EM Algorithm". : citation > 20k : 另外Dempster : Covariance selection Biometrics 28, 157-175, 1972 : 提出了undirected graphical model for Gaussian distribution : 可惜没啥人知道这个。。。 : MJ也就是把graphical model在cs中应用发扬光大,算不上什么顶级大师吧。
|
|
|
m****t 发帖数: 555 | 191
一边呆着去吧,又一个装B的。
你有什么哪得出手的来得瑟一下?
除了会Vapnic舔屁股还会干啥?他真的比你爹都亲啊。
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 说了半天果然是个半瓶醋,IJCAI也来得瑟,也太贻笑大方了。
|
m****t 发帖数: 555 | 192
讲理是对君子而言的。
你这种垃圾,也配?
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 就这德行啊,我都后悔我回了你的帖。
|
o****o 发帖数: 8077 | 193 NetFlix? The winner used SVD based algorithms, right?
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 实践证明,理论上看起来很好的东西,实践中往往赶不上简单有效的方法。 : 看看前几年,我记得是2007 kdd cup优胜者用的什么方法,足以把一帮研究machine : learning新算法的人羞死。 : 这就是以拙胜巧,以简胜繁。
|
m****t 发帖数: 555 | 194
不是这个意思。
我的意思是学术研究和实际应用仍然有很大的gap。在学术上的新东西新算法,仍然不
成熟。
【在 l******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 你的意思是machine learning已经研究完了,大家都可以转行了吧。
|
r********3 发帖数: 2998 | 195 说说看,什么算法啊?
我也觉得很多machine learning的不靠谱。
为了追求一点精度上提升,还不如多去开采一些数据。
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : 不是这个意思。 : 我的意思是学术研究和实际应用仍然有很大的gap。在学术上的新东西新算法,仍然不 : 成熟。
|
F*P 发帖数: 3204 | 196 崇拜一下啊。。。。。。
【在 G*****7 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 周志华不如香港的Xu Lei : Bayesian Ying-Yang System and Harmony Learning Theory : 采撷阴阳,济天下之和谐大成 : xu出于jordan而胜于jordan
|
b******s 发帖数: 589 | |
C*********h 发帖数: 74 | 198 IJCAI,AAAI太大了,有的论文就把交叉的东西做做而已。
要说ML,还是主要看ICML那。
IJCAI两篇,真的不算什么。
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : 不是这个意思。 : 我的意思是学术研究和实际应用仍然有很大的gap。在学术上的新东西新算法,仍然不 : 成熟。
|
d*e 发帖数: 843 | 199 【 以下文字转载自 Faculty 讨论区 】
发信人: dde (DDT), 信区: Faculty
标 题: 牛人很神奇的简历啊
发信站: BBS 未名空间站 (Fri May 14 22:11:43 2010, 美东)
http://www.cs.berkeley.edu/~jordan/jordan-cv.pdf
Member, National Academy of Sciences, 2010.
Member, National Academy of Engineering, 2010.
今年NAE和NAS双料新科院士。。。
可是,他88年麻省大学做完博士后时,paper几乎是0啊,咋找到MIT AP职位的?
那会是不是是个博士/博士后都能找到AP职位啊。。。 |
H*********r 发帖数: 659 | 200 He must have convinced senior professors of MIT that he was going to a
superstar of the field.
But it's quite easy to find a faculty position before 2000, after that ....
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 【 以下文字转载自 Faculty 讨论区 】 : 发信人: dde (DDT), 信区: Faculty : 标 题: 牛人很神奇的简历啊 : 发信站: BBS 未名空间站 (Fri May 14 22:11:43 2010, 美东) : http://www.cs.berkeley.edu/~jordan/jordan-cv.pdf : Member, National Academy of Sciences, 2010. : Member, National Academy of Engineering, 2010. : 今年NAE和NAS双料新科院士。。。 : 可是,他88年麻省大学做完博士后时,paper几乎是0啊,咋找到MIT AP职位的? : 那会是不是是个博士/博士后都能找到AP职位啊。。。
|
|
|
n***l 发帖数: 1468 | 201 这个人, 在machine learning领域, 那是超级大牛啊, top3肯定是没问题的. |
P**l 发帖数: 3722 | 202 这不是迈克尔乔丹吗?
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 【 以下文字转载自 Faculty 讨论区 】 : 发信人: dde (DDT), 信区: Faculty : 标 题: 牛人很神奇的简历啊 : 发信站: BBS 未名空间站 (Fri May 14 22:11:43 2010, 美东) : http://www.cs.berkeley.edu/~jordan/jordan-cv.pdf : Member, National Academy of Sciences, 2010. : Member, National Academy of Engineering, 2010. : 今年NAE和NAS双料新科院士。。。 : 可是,他88年麻省大学做完博士后时,paper几乎是0啊,咋找到MIT AP职位的? : 那会是不是是个博士/博士后都能找到AP职位啊。。。
|
i*********8 发帖数: 3229 | 203 这就是作为老美的优势了,
有些老美博士的时候屁都没有,然后再好学占了一个好坑找了牛学生出了一堆牛成果,
美国这个系统你也分不出是谁的贡献然后就成名了。
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 【 以下文字转载自 Faculty 讨论区 】 : 发信人: dde (DDT), 信区: Faculty : 标 题: 牛人很神奇的简历啊 : 发信站: BBS 未名空间站 (Fri May 14 22:11:43 2010, 美东) : http://www.cs.berkeley.edu/~jordan/jordan-cv.pdf : Member, National Academy of Sciences, 2010. : Member, National Academy of Engineering, 2010. : 今年NAE和NAS双料新科院士。。。 : 可是,他88年麻省大学做完博士后时,paper几乎是0啊,咋找到MIT AP职位的? : 那会是不是是个博士/博士后都能找到AP职位啊。。。
|
N**D 发帖数: 10322 | 204 so so
has lots of funding
【在 n***l 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这个人, 在machine learning领域, 那是超级大牛啊, top3肯定是没问题的.
|
P***P 发帖数: 1387 | 205 无知者无畏
牛不牛看他的学生有多少在top10当教授就知道了
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : so so : has lots of funding
|
N**D 发帖数: 10322 | 206 u r obviously young
【在 P***P 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 无知者无畏 : 牛不牛看他的学生有多少在top10当教授就知道了
|
l****g 发帖数: 761 | 207 估计你不是做 ML 的
不然不会不知道 Michael Jordan 的
他的学生比如 Andrew Ng 和 Eric Xing 现在都是呼风唤雨的人物了
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : u r obviously young
|
w***n 发帖数: 1084 | 208 I think he is more famous for his achievement in NBA. |
d*e 发帖数: 843 | 209 难怪当上院士了,哈哈
【在 P***P 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 无知者无畏 : 牛不牛看他的学生有多少在top10当教授就知道了
|
d*e 发帖数: 843 | 210 没发迹以前,怎么占坑呢?
【在 n***l 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这个人, 在machine learning领域, 那是超级大牛啊, top3肯定是没问题的.
|
|
|
d*****u 发帖数: 17243 | 211 Eric Xing也是折腾高手啊
物理本科,生物PhD
然后不过瘾又去念个CS的PhD
【在 l****g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 估计你不是做 ML 的 : 不然不会不知道 Michael Jordan 的 : 他的学生比如 Andrew Ng 和 Eric Xing 现在都是呼风唤雨的人物了
|
v******d 发帖数: 1322 | 212 生物phd路很难走,只好转专业,不是不过瘾
【在 d*****u 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Eric Xing也是折腾高手啊 : 物理本科,生物PhD : 然后不过瘾又去念个CS的PhD
|
d*e 发帖数: 843 | 213 这个吗?
University of California, Berkeley, Ph.D. in Computer Science (1999–2004).
Research advisors: Profs. Richard Karp, Michael Jordan and Stuart Russell
Rutgers University, Ph.D. in Molecular Biology and Biochemistry (1994–1999).
Research advisor: Prof. Chung S. Yang
Rutgers University, M.Sc. in Computer Science (1996–1998).
Research advisor: Prof. Casimir Kulikowski
Tsinghua University, B.Sc. in Physics and Biology (dual major, 1988–1993).
Research advisor: Prof. Jun Zhao
实在是佩服啊
【在 d*****u 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Eric Xing也是折腾高手啊 : 物理本科,生物PhD : 然后不过瘾又去念个CS的PhD
|
d*e 发帖数: 843 | 214 一般人哪有这个毅力啊
1999).
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这个吗? : University of California, Berkeley, Ph.D. in Computer Science (1999–2004). : Research advisors: Profs. Richard Karp, Michael Jordan and Stuart Russell : Rutgers University, Ph.D. in Molecular Biology and Biochemistry (1994–1999). : Research advisor: Prof. Chung S. Yang : Rutgers University, M.Sc. in Computer Science (1996–1998). : Research advisor: Prof. Casimir Kulikowski : Tsinghua University, B.Sc. in Physics and Biology (dual major, 1988–1993). : Research advisor: Prof. Jun Zhao : 实在是佩服啊
|
L********d 发帖数: 3820 | 215 看来大家对统计的状况不太清楚啊
很多统计phd不需要paper就可以毕业,甚至不需要paper就可以找到faculty
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 【 以下文字转载自 Faculty 讨论区 】 : 发信人: dde (DDT), 信区: Faculty : 标 题: 牛人很神奇的简历啊 : 发信站: BBS 未名空间站 (Fri May 14 22:11:43 2010, 美东) : http://www.cs.berkeley.edu/~jordan/jordan-cv.pdf : Member, National Academy of Sciences, 2010. : Member, National Academy of Engineering, 2010. : 今年NAE和NAS双料新科院士。。。 : 可是,他88年麻省大学做完博士后时,paper几乎是0啊,咋找到MIT AP职位的? : 那会是不是是个博士/博士后都能找到AP职位啊。。。
|
d*****u 发帖数: 17243 | 216 一般转也不会转PhD的,所以他确实是有学术追求,不是路不好走
再说他在拿到生物PhD之前已经有CS的master
在90年代末找工作应该是很容易的
不过这人貌似是奥赛得过名次的,所以不具有可复制性
【在 v******d 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 生物phd路很难走,只好转专业,不是不过瘾
|
r********3 发帖数: 2998 | 217 这不就是传说中的Michael Jordan吗?他怎么只能用牛人来形容啊,他应该可以归结到
神人的地步。他的学生,Andraw N.g这些都超级大牛。他教出来的学生形成了一个“
Jordan系”,把AI最牛的NIPS conference垄断了,从而导致了ICML这些的成长。
看过他好多Machine Learning的paper,他在AI方面的功底,早已经超越的普通人类的
境界。
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 一般人哪有这个毅力啊 : : 1999).
|
d*e 发帖数: 843 | 218 OMG,快来拜上帝
【在 r********3 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这不就是传说中的Michael Jordan吗?他怎么只能用牛人来形容啊,他应该可以归结到 : 神人的地步。他的学生,Andraw N.g这些都超级大牛。他教出来的学生形成了一个“ : Jordan系”,把AI最牛的NIPS conference垄断了,从而导致了ICML这些的成长。 : 看过他好多Machine Learning的paper,他在AI方面的功底,早已经超越的普通人类的 : 境界。
|
l******e 发帖数: 470 | 219 你讲个不soso的出来
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : so so : has lots of funding
|
l******e 发帖数: 470 | 220 人家讨论的就是ml
你来列下everything的牛人
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : you are too narrow mind. : ML is not everything.
|
|
|
a****a 发帖数: 98 | 221
his
+ Poincare
superhero.
after
【在 b******y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : About five years ago, I noticed MJ was not a NAS/MAE member yet despite his : tremendous impact on ML. It is not surprising to see his achievements : finally got recognized now. For those who admire MJ's fame, you might be : surprised that he is not an ACM Fellow yet. It is a fact that ML is not : everything even within CS. : To the best of my knowledge, there are only two polymaths in the modern : science: John Von Neumann and Herbert A. Simon. It is my personal opinion : that everyone has his own threshold
|
N**D 发帖数: 10322 | 222 还呼风唤雨,跟黑社会似的
【在 l****g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 估计你不是做 ML 的 : 不然不会不知道 Michael Jordan 的 : 他的学生比如 Andrew Ng 和 Eric Xing 现在都是呼风唤雨的人物了
|
N**D 发帖数: 10322 | 223 垄断?学术难道不是百花齐放?
【在 r********3 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这不就是传说中的Michael Jordan吗?他怎么只能用牛人来形容啊,他应该可以归结到 : 神人的地步。他的学生,Andraw N.g这些都超级大牛。他教出来的学生形成了一个“ : Jordan系”,把AI最牛的NIPS conference垄断了,从而导致了ICML这些的成长。 : 看过他好多Machine Learning的paper,他在AI方面的功底,早已经超越的普通人类的 : 境界。
|
N**D 发帖数: 10322 | 224 minsky
vapnik
你讲讲MJ最有开创性的工作?
【在 l******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 你讲个不soso的出来
|
l******e 发帖数: 470 | 225 你的bar太高,就turing奖这个级别的不soso,我也没话说
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : minsky : vapnik : 你讲讲MJ最有开创性的工作?
|
l******e 发帖数: 470 | 226 mj很nx了,你遗憾啥啊,替版上wsn遗憾遗憾吧,呵呵。。
【在 f*******r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 觉得MJ是牛人但非神人。 : 他属于领导时代潮流的人,但目前为止他还没有创立出一套完整而深入的理论 : 体系来,稍微有点遗憾。
|
l*******n 发帖数: 1972 | 227 论学术水平,那是top3,论学霸程度,绝对最学霸没有之一,NIPS完全被他掌控,不少
大学的ML方向
都是他的徒子徒孙。操,从这几点来看,这家伙人品真的很差
【在 n***l 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这个人, 在machine learning领域, 那是超级大牛啊, top3肯定是没问题的.
|
r********3 发帖数: 2998 | 228 对啊,他开创的"Jordan系”,基本垄断了AI最牛的NIPS。
结果导致外面的人改投ICML了。从而让ICML蓬勃发展。
一般中国来的,能成为他的学生的学生,都是相当的牛人啊。
【在 l*******n 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 论学术水平,那是top3,论学霸程度,绝对最学霸没有之一,NIPS完全被他掌控,不少 : 大学的ML方向 : 都是他的徒子徒孙。操,从这几点来看,这家伙人品真的很差
|
r********3 发帖数: 2998 | 229 support vector machine,我觉得只是用数学系的quadratic programming来套用在分
类优化问题上吧。做CS的提出这个挺不错的。但是这个作者本身就是做数学出身的啊。
分类模型不是他提出的,同时quadratic programming也不是他发明的。。。
如果这样说起来,M.J.也有他的工作啊。比如说,我看过早年他们做过的active
learning,spectral clustering,虽然都是合作的。。。
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : minsky : vapnik : 你讲讲MJ最有开创性的工作?
|
s******g 发帖数: 3841 | 230 中国人做ML,data mining,PR的多
总以为这几样就是代表AI了
我知道香港某牛校有很多做ML,DM很厉害的教授,但是在美国听到人表扬最多的还是一
个做logic的,一年只发1、2篇文章的教授
【在 r********3 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这不就是传说中的Michael Jordan吗?他怎么只能用牛人来形容啊,他应该可以归结到 : 神人的地步。他的学生,Andraw N.g这些都超级大牛。他教出来的学生形成了一个“ : Jordan系”,把AI最牛的NIPS conference垄断了,从而导致了ICML这些的成长。 : 看过他好多Machine Learning的paper,他在AI方面的功底,早已经超越的普通人类的 : 境界。
|
|
|
d*****u 发帖数: 17243 | 231 英国的AI就是logic之类的多
【在 s******g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 中国人做ML,data mining,PR的多 : 总以为这几样就是代表AI了 : 我知道香港某牛校有很多做ML,DM很厉害的教授,但是在美国听到人表扬最多的还是一 : 个做logic的,一年只发1、2篇文章的教授
|
l********w 发帖数: 253 | 232 Jordan不光学术好,讲课也是一个非常好的老师。 |
s***y 发帖数: 198 | 233 他的水平算不上前三,前五差不多,排在周志华之后,
【在 f*******r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 感觉前三有点玄,前五差不多。 : 我心目中的排名: : V. VAPNIK, L. BREIMAN : R. SCHAPIRE ~ L. VALIANT ~ D. HAUSSLER ~ M. JORDAN
|
d*e 发帖数: 843 | 234
~~~~ 你是鸡丁吗?
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 他的水平算不上前三,前五差不多,排在周志华之后,
|
s******g 发帖数: 3841 | 235 周志华威武
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 他的水平算不上前三,前五差不多,排在周志华之后,
|
N**D 发帖数: 10322 | 236 所以说你还很年轻嘛
在多看看书,多看看paper, 就知道vapnic有多牛了,就知道为啥SVM这么厉害,
spectral clustering, 如果没记错的话,好像最后还是要用k-means吧。说白了,炒作。
类似的想法很早就有,只不过是这个大牛在某次nips提出来,就好象很火。这个大牛的
一个弟子,认为凡是和他们想法不同的就不是spectral clutsering, fourier
analysis 也不是spectral 的。
希望牛人们使劲在nips灌水,别到其它地方害人了。
【在 r********3 的大作中提到】![](/moin_static193/solenoid/img/up.png) : support vector machine,我觉得只是用数学系的quadratic programming来套用在分 : 类优化问题上吧。做CS的提出这个挺不错的。但是这个作者本身就是做数学出身的啊。 : 分类模型不是他提出的,同时quadratic programming也不是他发明的。。。 : 如果这样说起来,M.J.也有他的工作啊。比如说,我看过早年他们做过的active : learning,spectral clustering,虽然都是合作的。。。
|
t*******a 发帖数: 45 | 237 你在讲相声吗?
【在 r********3 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这不就是传说中的Michael Jordan吗?他怎么只能用牛人来形容啊,他应该可以归结到 : 神人的地步。他的学生,Andraw N.g这些都超级大牛。他教出来的学生形成了一个“ : Jordan系”,把AI最牛的NIPS conference垄断了,从而导致了ICML这些的成长。 : 看过他好多Machine Learning的paper,他在AI方面的功底,早已经超越的普通人类的 : 境界。
|
t*******a 发帖数: 45 | 238 周志华得罪你了?
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 他的水平算不上前三,前五差不多,排在周志华之后,
|
G*****7 发帖数: 1759 | 239 svm就是个glorified template matcher,
你还是多看看hinton系的东西吧。
btw 四大系
逻辑系,老jm/mm和子弟;
jordan系;
神经系,hinton, lecun;
svm系,现在基本也就是在英国、欧陆、澳洲有些影响。
作。
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 所以说你还很年轻嘛 : 在多看看书,多看看paper, 就知道vapnic有多牛了,就知道为啥SVM这么厉害, : spectral clustering, 如果没记错的话,好像最后还是要用k-means吧。说白了,炒作。 : 类似的想法很早就有,只不过是这个大牛在某次nips提出来,就好象很火。这个大牛的 : 一个弟子,认为凡是和他们想法不同的就不是spectral clutsering, fourier : analysis 也不是spectral 的。 : 希望牛人们使劲在nips灌水,别到其它地方害人了。
|
G*****7 发帖数: 1759 | 240 f. bach or andrew ng or eric xing
【在 f*******r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : 统计中哪些结果被vapnik忽略了? : 他和Chervonenkis的理论1971年就基本奠基了。
|
|
|
l******e 发帖数: 470 | 241 恩,讲课一听就是大师的讲法
【在 l********w 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Jordan不光学术好,讲课也是一个非常好的老师。
|
l******e 发帖数: 470 | 242 牛人啊,一个 QP 就把SVM概括了
SVM的书都可以不用写了。
【在 r********3 的大作中提到】![](/moin_static193/solenoid/img/up.png) : support vector machine,我觉得只是用数学系的quadratic programming来套用在分 : 类优化问题上吧。做CS的提出这个挺不错的。但是这个作者本身就是做数学出身的啊。 : 分类模型不是他提出的,同时quadratic programming也不是他发明的。。。 : 如果这样说起来,M.J.也有他的工作啊。比如说,我看过早年他们做过的active : learning,spectral clustering,虽然都是合作的。。。
|
w***s 发帖数: 424 | 243 Jordan的确是引领NIPS的research topic。
他正在写的书,还没写完就已经很多人在期待了...
【在 r********3 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 对啊,他开创的"Jordan系”,基本垄断了AI最牛的NIPS。 : 结果导致外面的人改投ICML了。从而让ICML蓬勃发展。 : 一般中国来的,能成为他的学生的学生,都是相当的牛人啊。
|
d*****u 发帖数: 17243 | 244 听起来像是科学与工程的差别
基本上做engineering的不会去关注什么哲学的,也不懂
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 我听过MJ讲的也听过vapnik讲的, : 对比一下,可能大师称号只能给vapnik,大师讲东西已经脱离形式注重内容,大师讲课 : 中一边引用哲学家的话语,一边自然而然的联系到实体论等哲学观点。 : MJ的也就是technically 非常有insight而已,基本上还是流于形式的高级技术讨论而已 : 。
|
d******e 发帖数: 7844 | 245 所以MJ在Statistics里的影响力越来越有限了。
倒是受到很多EECS的追捧。
【在 d*****u 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 听起来像是科学与工程的差别 : 基本上做engineering的不会去关注什么哲学的,也不懂
|
N**D 发帖数: 10322 | 246 glorified?
你搞一个出来
神经网络也是template matcher
graphical model 也是
问题很简单,就是要找个好的template.
【在 G*****7 的大作中提到】![](/moin_static193/solenoid/img/up.png) : svm就是个glorified template matcher, : 你还是多看看hinton系的东西吧。 : btw 四大系 : 逻辑系,老jm/mm和子弟; : jordan系; : 神经系,hinton, lecun; : svm系,现在基本也就是在英国、欧陆、澳洲有些影响。 : : 作。
|
N**D 发帖数: 10322 | 247 这个书好像已经写了至少5,6年了吧
【在 w***s 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Jordan的确是引领NIPS的research topic。 : 他正在写的书,还没写完就已经很多人在期待了...
|
N**D 发帖数: 10322 | 248 vapnik 是手中无环,心中也无环
mj还在练九阴真经
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 我听过MJ讲的也听过vapnik讲的, : 对比一下,可能大师称号只能给vapnik,大师讲东西已经脱离形式注重内容,大师讲课 : 中一边引用哲学家的话语,一边自然而然的联系到实体论等哲学观点。 : MJ的也就是technically 非常有insight而已,基本上还是流于形式的高级技术讨论而已 : 。
|
d******e 发帖数: 7844 | 249 我的说法有问题。
准确地说,MJ在Statistics的影响力很有限,倒是受到很多EECS的追捧。
Statistics里面也有很多人做机器学习,但影响力都要比他大。
至于你说的渗透,我没看到啊,Statistics的那几个定期刊根本没有人引他的文章啊。
【在 f*******r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 我觉得刚好相反。 : MJ以前在统计领域几乎没有什么影响,现在开始渗透。 : 这部分是由于Bayesian在统计中的势力慢慢变大,部分 : 得益于他在伯克利统计系兼职并带学生。
|
C*********e 发帖数: 587 | 250 看了后面好多comments。。。汗
首先,machine learning算属于CS下面,但是有自己的圈子,某种意义上above了CS的
圈子,和math, stat,neuro science等,有很多联系,而且是非常紧密的联系。圈子也
是自己建立的,比如NIPS,就是有专门的机构来组织,和IEEE,ACM都没有关系。印象
中,NIPS,ICML,AISTATS,UAI,COLT,这5个会议,都似乎和IEEE/ACM没关系。所以评上一
个ACM的fellow与否,无管紧要。
其次,ML还是相对年轻的学科,像是john lafferty,lawrence saul这样的超级大牛,
40来岁左右而已,而且JL看着也就30多多的样子。hinton老一些,他是
从AI年代就开始做了,不是ML出身。MJ学生这么多了,他自己也就50多吧,不算
很大。有些那种到到了年龄才能评的fellow,自然不会太多
评价一个学者牛否,PhD期间的工作不重要,更关键看他带学生之后的工作,他学生的
出路,声誉等等。综合来看,MJ绝对是超级大牛
SVM的解法可以看成是QP,但是他model里面的large margin和kernel的idea,far
above这点优化算法,太汗那个只是QP的说法了
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : ~~~~ 你是鸡丁吗?
|
|
|
C*********e 发帖数: 587 | 251 。。。ICML是这几年是水化趋势明显了。NIPS扯淡文章一直就有,从来没有
断过,NIPS牛在出了太多的好文章,好的结果一般prefer在NIPS上发出来
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 所以nips这些年走下坡路了,固然有好文章但是扯蛋的东西也多 : citation上面已经不如icml了,越来越多人关注icml了。
|
G*****7 发帖数: 1759 | 252 正确的解说是
他的graphical models书写了那么多年还没写完。
【在 w***s 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Jordan的确是引领NIPS的research topic。 : 他正在写的书,还没写完就已经很多人在期待了...
|
G*****7 发帖数: 1759 | 253 hinton 60+了
几年前去nips居然有一个workshop是庆祝他60生日。
最早nips几乎是他家人掌握的
【在 C*********e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 看了后面好多comments。。。汗 : 首先,machine learning算属于CS下面,但是有自己的圈子,某种意义上above了CS的 : 圈子,和math, stat,neuro science等,有很多联系,而且是非常紧密的联系。圈子也 : 是自己建立的,比如NIPS,就是有专门的机构来组织,和IEEE,ACM都没有关系。印象 : 中,NIPS,ICML,AISTATS,UAI,COLT,这5个会议,都似乎和IEEE/ACM没关系。所以评上一 : 个ACM的fellow与否,无管紧要。 : 其次,ML还是相对年轻的学科,像是john lafferty,lawrence saul这样的超级大牛, : 40来岁左右而已,而且JL看着也就30多多的样子。hinton老一些,他是 : 从AI年代就开始做了,不是ML出身。MJ学生这么多了,他自己也就50多吧,不算 : 很大。有些那种到到了年龄才能评的fellow,自然不会太多
|
G*****7 发帖数: 1759 | 254
谁搞出来都是。没有中间representation。
好的template是有intermediate rep的
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : glorified? : 你搞一个出来 : 神经网络也是template matcher : graphical model 也是 : 问题很简单,就是要找个好的template.
|
s***y 发帖数: 198 | 255 ML的派系,
周志华的集成学习,天下第一,未来的图灵,据说一个诺贝尔奖的还抄他,可见他的地
位。
SVM,万能药,对许多问题效果都很好,是ML生手的最爱。
BOOSTING。从ADABOOST到ADDITIVE MODEL,理论越来越深,在统计界有较大影响,实用
效果也很好。
PROBABILISTIC GRAPHICAL MODEL。PEARL开山,JORDAN发扬广大,HINTON也可以算,现
在是一大派,现在这一派也比较成熟了。JORDAN的GRAPHICAL MODEL书,电子版我08
年就见过,不知道大家说的是那一本。
【在 G*****7 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 正确的解说是 : 他的graphical models书写了那么多年还没写完。
|
w***g 发帖数: 5958 | 256 我外行,觉得现在真正能够实用的程序就libsvm一个。别的paper里写的那些美好的算
法怎么就没一个拿来能用的软件呢?
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : ML的派系, : 周志华的集成学习,天下第一,未来的图灵,据说一个诺贝尔奖的还抄他,可见他的地 : 位。 : SVM,万能药,对许多问题效果都很好,是ML生手的最爱。 : BOOSTING。从ADABOOST到ADDITIVE MODEL,理论越来越深,在统计界有较大影响,实用 : 效果也很好。 : PROBABILISTIC GRAPHICAL MODEL。PEARL开山,JORDAN发扬广大,HINTON也可以算,现 : 在是一大派,现在这一派也比较成熟了。JORDAN的GRAPHICAL MODEL书,电子版我08 : 年就见过,不知道大家说的是那一本。
|
r********3 发帖数: 2998 | 257 我记得中国南大还是人大也有个做数据库的教授,做讲座更大师。。。
一来就是从周易开始,从而引入各种计算问题。
刚开始觉得这家伙好牛啊,能把周易都联系起来,一定是个大哲学家。听到最后,你会
发现,这家伙就是一个大忽悠。
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 我听过MJ讲的也听过vapnik讲的, : 对比一下,可能大师称号只能给vapnik,大师讲东西已经脱离形式注重内容,大师讲课 : 中一边引用哲学家的话语,一边自然而然的联系到实体论等哲学观点。 : MJ的也就是technically 非常有insight而已,基本上还是流于形式的高级技术讨论而已 : 。
|
G*****7 发帖数: 1759 | 258 周志华不如香港的Xu Lei
Bayesian Ying-Yang System and Harmony Learning Theory
采撷阴阳,济天下之和谐大成
xu出于jordan而胜于jordan
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : ML的派系, : 周志华的集成学习,天下第一,未来的图灵,据说一个诺贝尔奖的还抄他,可见他的地 : 位。 : SVM,万能药,对许多问题效果都很好,是ML生手的最爱。 : BOOSTING。从ADABOOST到ADDITIVE MODEL,理论越来越深,在统计界有较大影响,实用 : 效果也很好。 : PROBABILISTIC GRAPHICAL MODEL。PEARL开山,JORDAN发扬广大,HINTON也可以算,现 : 在是一大派,现在这一派也比较成熟了。JORDAN的GRAPHICAL MODEL书,电子版我08 : 年就见过,不知道大家说的是那一本。
|
G*****7 发帖数: 1759 | 259
和bishop合写的。早就有draft电子版了,只在几个学校做内部教材。
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : ML的派系, : 周志华的集成学习,天下第一,未来的图灵,据说一个诺贝尔奖的还抄他,可见他的地 : 位。 : SVM,万能药,对许多问题效果都很好,是ML生手的最爱。 : BOOSTING。从ADABOOST到ADDITIVE MODEL,理论越来越深,在统计界有较大影响,实用 : 效果也很好。 : PROBABILISTIC GRAPHICAL MODEL。PEARL开山,JORDAN发扬广大,HINTON也可以算,现 : 在是一大派,现在这一派也比较成熟了。JORDAN的GRAPHICAL MODEL书,电子版我08 : 年就见过,不知道大家说的是那一本。
|
d*e 发帖数: 843 | 260 ....
【在 G*****7 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 周志华不如香港的Xu Lei : Bayesian Ying-Yang System and Harmony Learning Theory : 采撷阴阳,济天下之和谐大成 : xu出于jordan而胜于jordan
|
|
|
s***y 发帖数: 198 | 261 XU跟JORDAN做过很短的博后,他是做模式识别出身的,现在在国内影响不大。他根本没
法和周志华比,周的集成学习报了国家自然科学一等奖,基本上是看作和钱学森,冯康
一个级别的成果,现在在国内,做ML而又不捧周志华,没饭吃。等过几年周志华的学生
把牛校都占领了,他就是中国冯诺易曼。
周志华是东方不败级别的,VAPNIK算风清扬,JORDAN顶多是令狐冲,XU算陆大有。
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : ....
|
d*e 发帖数: 843 | 262 你这么捧周志华,他知道吗?要不要帮你转达一下?
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : XU跟JORDAN做过很短的博后,他是做模式识别出身的,现在在国内影响不大。他根本没 : 法和周志华比,周的集成学习报了国家自然科学一等奖,基本上是看作和钱学森,冯康 : 一个级别的成果,现在在国内,做ML而又不捧周志华,没饭吃。等过几年周志华的学生 : 把牛校都占领了,他就是中国冯诺易曼。 : 周志华是东方不败级别的,VAPNIK算风清扬,JORDAN顶多是令狐冲,XU算陆大有。
|
b****g 发帖数: 324 | 263 Hinton is no doubt better than MJ. |
l******e 发帖数: 470 | 264 没听过vapnik,
有视频没给一个?
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 我听过MJ讲的也听过vapnik讲的, : 对比一下,可能大师称号只能给vapnik,大师讲东西已经脱离形式注重内容,大师讲课 : 中一边引用哲学家的话语,一边自然而然的联系到实体论等哲学观点。 : MJ的也就是technically 非常有insight而已,基本上还是流于形式的高级技术讨论而已 : 。
|
v******d 发帖数: 1322 | 265 这是夸还是亏
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : XU跟JORDAN做过很短的博后,他是做模式识别出身的,现在在国内影响不大。他根本没 : 法和周志华比,周的集成学习报了国家自然科学一等奖,基本上是看作和钱学森,冯康 : 一个级别的成果,现在在国内,做ML而又不捧周志华,没饭吃。等过几年周志华的学生 : 把牛校都占领了,他就是中国冯诺易曼。 : 周志华是东方不败级别的,VAPNIK算风清扬,JORDAN顶多是令狐冲,XU算陆大有。
|
d*e 发帖数: 843 | 266 现在去跟Hinton进入ML领域,还有前途么?
【在 b****g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Hinton is no doubt better than MJ.
|
s***y 发帖数: 198 | 267 我觉得说ISING开山也行,ISING的工作是获得诺贝尔奖的,是统计物理里的经典。
JORDAN为什么在EECS吃香,因为GRAPHICAL MODEL统一了MRF,HMM,等等。而MRF和HMM
在信号和图像处理上EECS的人用的很多,所以接受JORDAN的东西没困难。总体说,
JORDAN还是偏计算,真正理论的东西不多,统计的人重理论,重模型,对他的东西不感
兴趣。
GRAPHICAL MODEL现在在BIOINFORMATICS上已经站稳了,经过KOLLER,FRIEDMAN,ERIC
XING 这些人的推动,在NATURE,SCIENCE上的文章也用了这种模型,甚至PEER靠这个拿
了NIH的R01,我因为这是GRAPHICAL MODEL最成功的应用。
这个领域我比较偏爱,有一次问了ANDREW YAO,他一把年纪了还做percolation theory
,
【在 f*******r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : 统计中哪些结果被vapnik忽略了? : 他和Chervonenkis的理论1971年就基本奠基了。
|
s***y 发帖数: 198 | 268 连诺贝尔奖获得者都抄他的工作,你说他牛不牛,我们这些无名小组能不佩服
【在 v******d 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这是夸还是亏
|
d*e 发帖数: 843 | 269 哈哈,我算是终于看明白了。。。
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 连诺贝尔奖获得者都抄他的工作,你说他牛不牛,我们这些无名小组能不佩服
|
P***P 发帖数: 1387 | 270 连ising都扯上了....
接着可以上CN Yang了.哈哈
HMM
ERIC
theory
【在 s***y 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 我觉得说ISING开山也行,ISING的工作是获得诺贝尔奖的,是统计物理里的经典。 : JORDAN为什么在EECS吃香,因为GRAPHICAL MODEL统一了MRF,HMM,等等。而MRF和HMM : 在信号和图像处理上EECS的人用的很多,所以接受JORDAN的东西没困难。总体说, : JORDAN还是偏计算,真正理论的东西不多,统计的人重理论,重模型,对他的东西不感 : 兴趣。 : GRAPHICAL MODEL现在在BIOINFORMATICS上已经站稳了,经过KOLLER,FRIEDMAN,ERIC : XING 这些人的推动,在NATURE,SCIENCE上的文章也用了这种模型,甚至PEER靠这个拿 : 了NIH的R01,我因为这是GRAPHICAL MODEL最成功的应用。 : 这个领域我比较偏爱,有一次问了ANDREW YAO,他一把年纪了还做percolation theory : ,
|
|
|
P***P 发帖数: 1387 | 271 这里讨论vapnic跟MJ的, 先把他两的书都看了再说把.
只同意这句话
评价一个学者牛否,PhD期间的工作不重要,更关键看他带学生之后的工作,他学生的
出路,声誉等等。 |
j*****n 发帖数: 1545 | 272 我也觉得看一个人牛不牛要看他自己的工作,不是看他学生的出路.
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 不看他们的书也是可以评价的,否则学术大拿们就跟江湖骗子一个级别了,专门蒙外行 : 人。 : vapnic不怎么带学生,你这个衡量标准是用来评估学霸的。 : 历史上的学术大牛都是自己做研究不是靠拿学生当stepstone的,按你这个标准MJ比爱 : 因斯坦还牛逼。 : 这种级别人物,看看citation就知道他们的影响力了。 : vapnic,唯一作者, : The nature of statistical learning theory, citation 超过1万7, 2000年出版的 : Statistical learning theory citation 超过1万3, 1998年出版的 :
|
N**D 发帖数: 10322 | 273 再讨论下去,MJ的徒子徒孙都要跳出来了
【在 j*****n 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 我也觉得看一个人牛不牛要看他自己的工作,不是看他学生的出路.
|
t*******a 发帖数: 45 | 274 明显是黑周志华的
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 你这么捧周志华,他知道吗?要不要帮你转达一下?
|
p*********g 发帖数: 226 | 275 对于 Vapnik 的书,cite 它的人中有几个真正读过超过10页,几个扫过一下目录,几
个瞄过一眼封面,几个根本连 ebook 都没下载过。 |
N**D 发帖数: 10322 | 276 问题是这样,如果不cite, 说明连这本书都没听说,那paper也别看了。而且, 只要关
于svm, kernel methods, transduction, kernel clustering, vc dimension,
distribution free bound, etc. ... 都可以引用
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 对于 Vapnik 的书,cite 它的人中有几个真正读过超过10页,几个扫过一下目录,几 : 个瞄过一眼封面,几个根本连 ebook 都没下载过。
|
p*********g 发帖数: 226 | 277 很多人其实就是想 cite 一个概念,懒得去查,直接就引 Vapnik 了事 |
p*******o 发帖数: 6791 | 278 原来是 M. J. 的 CV 啊, 这个是牛人啊. |
c**r 发帖数: 108 | 279 对头。
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 很多人其实就是想 cite 一个概念,懒得去查,直接就引 Vapnik 了事
|
G*****7 发帖数: 1759 | 280 hinton老矣,尚能contrastive div否
而且他最近的学生似乎也没什么在北美有影响力的
rus发了片science也才不过是去mit postdog
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 现在去跟Hinton进入ML领域,还有前途么?
|
|
|
d******e 发帖数: 7844 | 281 呵呵,这还不说明巨大成功?
【在 c**r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 对头。
|
i*********8 发帖数: 3229 | 282 难道svm 没人用吗?
连svm的一个实现libsvm都被cite了3K多了。
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 对于 Vapnik 的书,cite 它的人中有几个真正读过超过10页,几个扫过一下目录,几 : 个瞄过一眼封面,几个根本连 ebook 都没下载过。
|
p*********g 发帖数: 226 | 283 这说明 citation 远非 iid,所以 bound 很弱,说明不了什么。
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 呵呵,这还不说明巨大成功?
|
N**D 发帖数: 10322 | 284 比徒子徒孙还是要iid一些
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这说明 citation 远非 iid,所以 bound 很弱,说明不了什么。
|
p*********g 发帖数: 226 | 285 引MJ的人,大多看过他的paper。引Vapnik的人,大多是因为别人引了,又懒得自己查
。而且Vapnik的那本是书,很多东西也是别人的工作。他在苏联发展这项工作的时候,
其实又忽略了很多西方统记界已经有的东西。所以引Vapnik的书,不代表引Vapnik 原
创的工作。
MJ 现在被引的大多是他的paper,所以基本上就是他的工作。
其实说到现在还是漏了两个learning界的巨人:另一个michael,还有Rich Sutton。 |
N**D 发帖数: 10322 | 286 michael who?
其实说巨人吧,Gene Golub, 就是写Matrix Computation, SVD, 很牛地。所有的
machine learning, data mining, 最后都要用。
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 引MJ的人,大多看过他的paper。引Vapnik的人,大多是因为别人引了,又懒得自己查 : 。而且Vapnik的那本是书,很多东西也是别人的工作。他在苏联发展这项工作的时候, : 其实又忽略了很多西方统记界已经有的东西。所以引Vapnik的书,不代表引Vapnik 原 : 创的工作。 : MJ 现在被引的大多是他的paper,所以基本上就是他的工作。 : 其实说到现在还是漏了两个learning界的巨人:另一个michael,还有Rich Sutton。
|
p*********g 发帖数: 226 | 287 Kearns.
Gene Golub,呵呵,还是小众些吧,否则牛顿都要算了,人家发明了微积分。 |
D*****e 发帖数: 761 | 288 是的,他的讲课能让人对ML充满激情,绝非凡人可比啊
【在 l********w 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Jordan不光学术好,讲课也是一个非常好的老师。
|
d******e 发帖数: 7844 | 289 呵呵,你查查Vapnik 92和95年的关于SVM的paper,一个5000多引用,一个接近3000。
SVM在各个领域都有成功的应用,并且已经被大范围推广,MJ有哪个工作可以比肩?
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 引MJ的人,大多看过他的paper。引Vapnik的人,大多是因为别人引了,又懒得自己查 : 。而且Vapnik的那本是书,很多东西也是别人的工作。他在苏联发展这项工作的时候, : 其实又忽略了很多西方统记界已经有的东西。所以引Vapnik的书,不代表引Vapnik 原 : 创的工作。 : MJ 现在被引的大多是他的paper,所以基本上就是他的工作。 : 其实说到现在还是漏了两个learning界的巨人:另一个michael,还有Rich Sutton。
|
p*********g 发帖数: 226 | 290 >> 你查查Vapnik 92和95年的关于SVM的paper,一个5000多引用,一个接近3000。
呵呵,Corinna Cortes 还是挺令人崇拜的,引入soft margin其实是她的idea,Vapnik 在苏联20年就专心 separable 的了。separable SVM 其实 Vapnik 早就在苏联搞得差不多了,到了美国,把这些集大成的精华发在一个地方。要是真的一点点develop着发,就像大多数人一样,就没那么shocking了。
如果真要比citation, MJ 显然要等10年再和 Vapnik 比,毕竟年龄相差20岁了。
graphical model 还有得可以搞,kernel 和 max margin 已经日落西山了。
其实,Vapnik 最大的问题是他忽略了西方统计领域的一些早有的东西,这让统计的人
有点 upset。当然不怪他,毕竟当时在苏联。
感兴趣当年苏联 math programming 界轶事的,推荐这张paper,其实很多是整个苏联科学界的情况:http://www.springerlink.com/content/0byp2upjdgc8ycr9/ |
|
|
B****x 发帖数: 17 | 291 http://blog.sina.com.cn/s/blog_661c16d00100kc51.html
机器学习大家谈(转贴)(2010-03-17 21:42:19)转载
标签:杂谈 分类:学术科研
闲着无事,想写点一些我所了解的machine learning大家。由于学识浅薄,见识有限,
并且仅局
限于某些领域,一些在NLP及最近很热的生物信息领域活跃的学者我就浅陋无知,所以
不对的地方大
家仅当一笑。
Machine Learning 大家(1):M. I. Jordan
在我的眼里,M Jordan无疑是武林中的泰山北斗。他师出MIT,现在在berkeley坐
镇一方,
在附近的两所名校(加stanford)中都可以说无出其右者,stanford的Daphne Koller
虽然也
声名遐迩,但是和Jordan比还是有一段距离。
Jordan身兼stat和cs两个系的教授,从他身上可以看出Stat和ML的融合。
Jordan 最先专注于mixtures of experts,并迅速奠定了自己的地位,我们哈尔滨
工业大
学的校友徐雷跟他做博后期间,也在这个方向上沾光不少。Jordan和他的弟子在很多方
面作出了开
创性的成果,如spectral clustering, Graphical model和nonparametric
Bayesian。现在后两者在ML领域是非常炙手可热的两个方向,可以说很大程度上是
Jordan的lab
一手推动的。
更难能可贵的是, Jordan不仅自己武艺高强,并且揽钱有法,教育有方,手下门
徒众多且很多
人成了大器,隐然成为江湖大帮派。他的弟子中有10多人任教授,个人认 为他现在的
弟子中最出色
的是stanford的Andrew Ng,不过由于资历原因,现在还是assistant professor,不过
成为
大教授指日可待;另外Tommi Jaakkola和David Blei也非常厉害,其中Tommi Jaakkola在
mit任教而David Blei在cmu做博后,数次获得NIPS最佳论文奖,把SVM的最大间隔方法和
Markov network的structure结构结合起来,赫赫有名。还有一个博后是来自于toronto
的Yee
Whye Teh,非常不错,有幸跟他打过几次交道,人非常nice。另外还有一个博后居然在
做生物信息
方面的东西,看来jordan在这方面也捞了钱。这方面他有一个中国学生Eric P. Xing(
清华大学
校友),现在在cmu做assistant professor。
总的说来,我觉得 Jordan现在做的主要还是graphical model和Bayesian
learning,
他去年写了一本关于graphical model的书,今年由mit press出版,应该是这个领域里
程碑式
的著作。3月份曾经有人答应给我一本打印本看看,因为Jordan不让他传播电子版,但
后来好像没放
在心上(可见美国人也不是很守信的),人不熟我也不好意思问着要,可以说是一大遗
憾. 另外发现
一个有趣的现象就是Jordan对hierarchical情有独钟,相当多的文章都是关于
hierarchical
的,所以能 hierarchical大家赶快hierarchical,否则就让他给抢了。
用我朋友话说看jordan牛不牛,看他主页下面的Past students and postdocs就知道
了。
Machine Learning大家(2):D. Koller
D. Koller是1999年美国青年科学家总统奖(PECASE)得主,IJCAI 2001 Computers
and Thought Award(IJCAI计算机与思维奖,这是国际人工智能界35岁以下青年学者的
最高奖)
得主,2004 World Technology Award得主。
最先知道D koller是因为她得了一个大奖,2001年IJCAI计算机与思维奖。Koller
因她在概
率推理的理论和实践、机器学习、计算博弈论等领域的重要贡献,成为继Terry
Winograd、
David Marr、Tom Mitchell、Rodney Brooks等人之后的第18位获奖者。说起这个奖挺
有意
思的,IJCAI终身成就奖(IJCAI Award for Research Excellence),是国际人工智能
界的
最高荣誉; IJCAI计算机与思维奖是国际人工智能界35岁以下青年学者的最高荣誉。早
期AI研究将
推理置于至高无上的地位; 但是1991年牛人Rodney Brooks对推理全面否定,指出机器
只能独立
学习而得到了IJCAI计算机与思维奖; 但是koller却因提出了Probabilistic
Relational
Models 而证明机器可以推理论知而又得到了这个奖,可见世事无绝对,科学有轮回。
D koller的Probabilistic Relational Models在nips和icml等各种牛会上活跃了相
当长的一段时间,并且至少在实验室里证明了它在信息搜索上的价值,这也导致了她的
很多学生进入
了 google。虽然进入google可能没有在牛校当faculty名声响亮,但要知道google的很
多员工
现在可都是百万富翁,在全美大肆买房买车的主。
Koller的研究主要都集中在probabilistic graphical model,如Bayesian网络,
但这
玩意我没有接触过,我只看过几篇他们的markov network的文章,但看了也就看了,一
点想法都没
有,这滩水有点深,不是我这种非科班出身的能趟的,并且感觉难以应用到我现在这个
领域中。
Koller 才从教10年,所以学生还没有涌现出太多的牛人,这也是她不能跟Jordan
比拟的地
方,并且由于在stanford的关系,很多学生直接去硅谷赚大钱去了,而没有在学术界开
江湖大帮派
的影响,但在stanford这可能太难以办到,因为金钱的诱惑实在太大了。不过Koller的
一个学生我
非常崇拜,叫 Ben Taskar,就是我在(1)中所提到的Jordan的博后,是好几个牛会的
最佳论文
奖,他把SVM的最大间隔方法和Markov network结合起来,可以说是对structure data
处理的
一种标准工具,也把最大间隔方法带入了一个新的热潮,近几年很多牛会都有这样的
workshop。 我
最开始上Ben Taskar的在stanford的个人网页时,正赶上他刚毕业,他的顶上有这么一
句话:流
言变成了现实,我终于毕业了!可见Koller是很变态的,把自己的学生关得这么郁闷,
这恐怕也是
大多数女faculty的通病吧,并且估计还非常的push!
Machine learning 大家(3):J. D. Lafferty
大家都知道NIPS和ICML向来都是由大大小小的山头所割据,而John Lafferty无疑
是里面相
当高的一座高山,这一点可从他的publication list里的NIPS和ICML数目得到明证。虽
然江湖
传说计算机重镇CMU现在在走向衰落,但这无碍Lafferty拥有越来越大的影响力,翻开
AI兵器谱排
名第一的journal of machine learning research的很多文章,我们都能发现author或者
editor中赫然有Lafferty的名字。
Lafferty给人留下的最大的印象似乎是他2001年的conditional random fields,
这篇
文章后来被疯狂引用,广泛地应用在语言和图像处理,并随之出现了很多的变体,如
Kumar的
discriminative random fields等。虽然大家都知道discriminative learning好,但很
久没有找到好的discriminative方法去处理这些具有丰富的contextual inxxxxation的数
据,直到Lafferty的出现。
而现在Lafferty做的东西好像很杂,semi-supervised learning, kernel
learning,graphical models甚至manifold learning都有涉及,可能就是像武侠里一
样只
要学会了九阳神功,那么其它的武功就可以一窥而知其精髓了。这里面我最喜欢的是
semi-
supervised learning,因为随着要处理的数据越来越多,进行全部label过于困难,而
完全
unsupervised的方法又让人不太放心,在这种情况下 semi-supervised learning就成
了最
好的。这没有一个比较清晰的认识,不过这也给了江湖后辈成名的可乘之机。到现在为
止,我觉得
cmu的semi- supervised是做得最好的,以前是KAMAL NIGAM做了开创性的工作,而现在
Lafferty和他的弟子作出了很多总结和创新。
Lafferty 的弟子好像不是很多,并且好像都不是很有名。不过今年毕业了一个中
国人,
Xiaojin Zhu(上海交通大学校友),就是做semi-supervised的那个人,现在在
wisconsin-
madison做assistant professor。他做了迄今为止最全面的Semi-supervised learning
literature survey,大家可以从他的个人主页中找到。这人看着很憨厚,估计是很好
的陶瓷对
象。另外我在(1)中所说的Jordan的牛弟子D Blei今年也投奔Lafferty做博后,就足见
Lafferty的牛了。
Lafferty做NLP是很好的,著名的Link Grammar Parser还有很多别的应用。其中
language model在IR中应用,这方面他的另一个中国学生ChengXiang Zhai(南京大学校
友,
2004年美国青年科学家总统奖(PECASE)得主),现在在uiuc做assistant professor。
Machine learning 大家(4):Peter L. Bartlett
鄙人浅薄之见,Jordan比起同在berkeley的Peter Bartlett还是要差一个层次。
Bartlett主要的成就都是在learning theory方面,也就是ML最本质的东西。他的几篇
开创性理
论分析的论文,当然还有他的书Neural Network Learning: Theoretical Foundations。
UC Berkeley的统计系在强手如林的北美高校中一直是top3,这就足以证明其肯定
是群星荟
萃,而其中,Peter L. Bartlett是相当亮的一颗星。关于他的研究,我想可以从他的
一本书里得
到答案:Neural Network Learning: Theoretical Foundations。也就是说,他主要做的
是Theoretical Foundations。基础理论虽然没有一些直接可面向应用的算法那样引人
注目,但
对科学的发展实际上起着更大的作用。试想vapnik要不是在VC维的理论上辛苦了这么多
年,怎么可
能有SVM的问世。不过阳春白雪固是高雅,但大多数人只能听懂下里巴人,所以
Bartlett的文章大
多只能在做理论的那个圈子里产生影响,而不能为大多数人所广泛引用。
Bartlett在最近两年做了大量的Large margin classifiers方面的工作,如其
convergence rate和generalization bound等。并且很多是与jordan合作,足见两人的工
作有很多相通之处。不过我发现Bartlett的大多数文章都是自己为第一作者,估计是在
教育上存在
问题吧,没带出特别牛的学生出来。
Bartlett的个人主页的talk里有很多值得一看的slides,如Large Margin
Classifiers: Convexity and Classification;Large Margin Methods for
Structured Classification: Exponentiated Gradient Algorithms。大家有兴趣的
话可以去下来看看。
Machine learning 大家(5): Michael Collins
Michael Collins http://people.csail.mit.edu/mcollins/
自然语言处理(NLP)江湖的第一高人。出身Upenn,靠一身叫做Collins Parser的武
功在江
湖上展露头脚。当然除了资质好之外,其出身也帮了不少忙。早年一个叫做Mitchell P
. Marcus
的师傅传授了他一本葵花宝典-Penn Treebank。从此,Collins整日沉迷于此,终于练
成盖世神
功。
学成之后,Collins告别师傅开始闯荡江湖,投入了一个叫AT&T Labs Research的
帮会,并
有幸结识了Robert Schapire、Yoram Singer等众多高手。大家不要小瞧这个叫AT&T
Labs
Research的帮会,如果谁没有听过它的大名总该知道它的同父异母的兄弟Bell Labs吧。
言归正传,话说Collins在这里度过了3年快乐的时光。其间也奠定了其NLP江湖老
大的地位。
并且练就了Discriminative Reranking, Convolution Kernels,Discriminative
Training Methods for Hidden Markov Models等多种绝技。然而,世事难料,怎奈由
于帮
会经营不善,这帮大牛又不会为帮会拼杀,终于被一脚踢开,大家如鸟兽散了。
Schapire去了
Princeton, Singer 也回老家以色列了。Collins来到了MIT,成为了武林第一大帮的
六袋长
老,并教授一门叫做的Machine Learning Approaches for
NLPhttp://www.ai.mit.edu/courses/6.891-nlp/ 的功夫。虽然这一地位与其功力极不
相符,但是这并没有打消Collins的积极性,通过其刻苦打拼,终于得到了一个叫Sloan
Research Fellow的头衔,并于今年7月,光荣的升任7袋Associate Professor。
在其下山短短7年时间内,Collins共获得了4次世界级武道大会冠军(EMNLP2002,
2004,
UAI2004, 2005)。相信年轻的他,总有一天会一统丐帮,甚至整个江湖。
看过Collins和别人合作的一篇文章,用conditional random fields 做object
recogntion。还这么年轻,admire to death!
Machine learning 大家(6): Dan Roth
Dan Roth http://l2r.cs.uiuc.edu/~danr/
统计NLP领域的众多学者后,我得出了一个惊人的结论,就是叫Daniel的牛人特别
多: 大到MT
领域成名已久的Prof. Dan Melamed,小到Stanford刚刚毕业的Dan Klein,
中间又有Dan jurafsky这种牛魔王,甚至Michael Collins的师弟Dan Bikel (IBM
Research),ISI的Dan Marcu,获得过无数次TREC QA评比冠军的Prof. Dan Moldovan
(UTexas Dallas),UC Berkeley毕业的Dan Gildea (U Rochester)。但是,在众多的
Dan
中,我最崇拜的还是UIUC的Associate Professor,其Cognitive Computation Group的
头头Dan Roth。
这位老兄也是极其年轻的,Harvard博士毕业整十年,带领其团队撑起了UIUC
Machine
Learning以及NLP领域的一片灿烂天空。其领导开发的SNoW工具可谓是一把绝世好剑,
基本达到
了"又想马儿跑,又想马儿不吃草"的境界,在不损失分类精度的条件下,学习和预测速
度空前。什
么?你不知道SNoW?它和白雪公主有什么关系?看来我也得学学"超女"的粉丝们,来一
个扫盲了:
SNoW是Sparse Network of Winnows的简称,其中实现了Winnow算法,但是记住Sparse
Network才是其重点,正是因为有了这块玄铁,SNoW之剑才会如此锋利。
近年来Roth也赶时髦,把触角伸向了Structured Data学习领域,但与其他人在学习
的时候就
试图加入结构化信息(典型的如CRF)不同,Roth主张在预测的最后阶段加入约束进行推
理,这可以使
的学习效率极大的提高,同时在某些应用上,还取得了更好的结果。还有就是什么
Kernel学习,估
计他也是学生太多,安排不下了,所以只好开疆扩土。
Harvard出身的Roth,理论功底也极其深厚,好多涉及统计学习理论的工作就不是
我这种学工
科的人关心的了。 |
c******r 发帖数: 300 | 292 说到引用,这个文章很夸张
Dempster, A.P.; Laird, N.M.; Rubin, D.B. (1977). "Maximum Likelihood from
Incomplete Data via the EM Algorithm".
citation > 20k
另外Dempster
Covariance selection Biometrics 28, 157-175, 1972
提出了undirected graphical model for Gaussian distribution
可惜没啥人知道这个。。。
MJ也就是把graphical model在cs中应用发扬光大,算不上什么顶级大师吧。
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 不看他们的书也是可以评价的,否则学术大拿们就跟江湖骗子一个级别了,专门蒙外行 : 人。 : vapnic不怎么带学生,你这个衡量标准是用来评估学霸的。 : 历史上的学术大牛都是自己做研究不是靠拿学生当stepstone的,按你这个标准MJ比爱 : 因斯坦还牛逼。 : 这种级别人物,看看citation就知道他们的影响力了。 : vapnic,唯一作者, : The nature of statistical learning theory, citation 超过1万7, 2000年出版的 : Statistical learning theory citation 超过1万3, 1998年出版的 :
|
i*********8 发帖数: 3229 | 293 就目前而言,还真看不出来MJ有什么那得出手的东西20年后人还能记得住。
Vapnik 在苏联20年就专心 separable 的了。separable SVM 其实 Vapnik 早就在苏联
搞得差不多了,到了美国,把这些集大成的精华发在一个地方。要是真的一点点
develop着发,就像大多数人一样,就br />
Vapnik 比,毕竟年龄相差20岁了。
联科学界的情况:http://www.springerlink.com/content/0byp2upjdgc8ycr9/
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : >> 你查查Vapnik 92和95年的关于SVM的paper,一个5000多引用,一个接近3000。 : 呵呵,Corinna Cortes 还是挺令人崇拜的,引入soft margin其实是她的idea,Vapnik 在苏联20年就专心 separable 的了。separable SVM 其实 Vapnik 早就在苏联搞得差不多了,到了美国,把这些集大成的精华发在一个地方。要是真的一点点develop着发,就像大多数人一样,就没那么shocking了。 : 如果真要比citation, MJ 显然要等10年再和 Vapnik 比,毕竟年龄相差20岁了。 : graphical model 还有得可以搞,kernel 和 max margin 已经日落西山了。 : 其实,Vapnik 最大的问题是他忽略了西方统计领域的一些早有的东西,这让统计的人 : 有点 upset。当然不怪他,毕竟当时在苏联。 : 感兴趣当年苏联 math programming 界轶事的,推荐这张paper,其实很多是整个苏联科学界的情况:http://www.springerlink.com/content/0byp2upjdgc8ycr9/
|
h*******u 发帖数: 15326 | 294 一般人读第二个皮挨着地时候已经妻离子散了
【在 d*e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 一般人哪有这个毅力啊 : : 1999).
|
p*********g 发帖数: 226 | 295 >> 另外Tommi Jaakkola和David Blei也非常厉害,其中Tommi Jaakkola在
mit任教而David Blei在cmu做博后,
>> 数次获得NIPS最佳论文奖,把SVM的最大间隔方法和Markov network的structure结
构结合起来,赫赫有名。
Taskar? Thochantaridis/Altun? |
G*****7 发帖数: 1759 | 296 chinese restaurant process
【在 i*********8 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 就目前而言,还真看不出来MJ有什么那得出手的东西20年后人还能记得住。 : : Vapnik 在苏联20年就专心 separable 的了。separable SVM 其实 Vapnik 早就在苏联 : 搞得差不多了,到了美国,把这些集大成的精华发在一个地方。要是真的一点点 : develop着发,就像大多数人一样,就br /> : Vapnik 比,毕竟年龄相差20岁了。 : 联科学界的情况:http://www.springerlink.com/content/0byp2upjdgc8ycr9/
|
N**D 发帖数: 10322 | 297 india buffet process
【在 G*****7 的大作中提到】![](/moin_static193/solenoid/img/up.png) : chinese restaurant process
|
N**D 发帖数: 10322 | 298 摆脱别从国内转这种脑残文章
【在 B****x 的大作中提到】![](/moin_static193/solenoid/img/up.png) : http://blog.sina.com.cn/s/blog_661c16d00100kc51.html : 机器学习大家谈(转贴)(2010-03-17 21:42:19)转载 : 标签:杂谈 分类:学术科研 : 闲着无事,想写点一些我所了解的machine learning大家。由于学识浅薄,见识有限, : 并且仅局 : 限于某些领域,一些在NLP及最近很热的生物信息领域活跃的学者我就浅陋无知,所以 : 不对的地方大 : 家仅当一笑。 : Machine Learning 大家(1):M. I. Jordan : 在我的眼里,M Jordan无疑是武林中的泰山北斗。他师出MIT,现在在berkeley坐
|
N**D 发帖数: 10322 | 299 the essense of svm is "margin", which is a regulazier term
most other methods , first is penalty term, then regularizer term
Vapnik 在苏联20年就专心 separable 的了。separable SVM 其实 Vapnik 早就在苏联
搞得差不多了,到了美国,把这些集大成的精华发在一个地方。要是真的一点点
develop着发,就像大多数人一样,就br />
Vapnik 比,毕竟年龄相差20岁了。
联科学界的情况:http://www.springerlink.com/content/0byp2upjdgc8ycr9/
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : >> 另外Tommi Jaakkola和David Blei也非常厉害,其中Tommi Jaakkola在 : mit任教而David Blei在cmu做博后, : >> 数次获得NIPS最佳论文奖,把SVM的最大间隔方法和Markov network的structure结 : 构结合起来,赫赫有名。 : Taskar? Thochantaridis/Altun?
|
N**D 发帖数: 10322 | 300 或者说忽悠的很激情
【在 D*****e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 是的,他的讲课能让人对ML充满激情,绝非凡人可比啊
|
|
|
N**D 发帖数: 10322 | 301 这个个搞graphical model的说起svm, 别说"notthing but ...", "can be obtained
from this .... prob model..." etc
有本事提出个更好的
SVM很运气,根本没有对应的noise model
Vapnik 在苏联20年就专心 separable 的了。separable SVM 其实 Vapnik 早就在苏联
搞得差不多了,到了美国,把这些集大成的精华发在一个地方。要是真的一点点
develop着发,就像大多数人一样,就br />
Vapnik 比,毕竟年龄相差20岁了。
联科学界的情况:http://www.springerlink.com/content/0byp2upjdgc8ycr9/
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : >> 另外Tommi Jaakkola和David Blei也非常厉害,其中Tommi Jaakkola在 : mit任教而David Blei在cmu做博后, : >> 数次获得NIPS最佳论文奖,把SVM的最大间隔方法和Markov network的structure结 : 构结合起来,赫赫有名。 : Taskar? Thochantaridis/Altun?
|
N**D 发帖数: 10322 | 302 and mexico grill process
【在 G*****7 的大作中提到】![](/moin_static193/solenoid/img/up.png) : chinese restaurant process
|
p*********g 发帖数: 226 | 303 kernel 用在 SVM 也不是 Vapnik 的idea。
margin 这个东东其实统计、规划里早就有了。
当然话说回来,graphical model 里的很多东西统计里也早就有了,machine learning
的人把它发扬光大。
不讨论了。 |
i*********8 发帖数: 3229 | 304 不讨论了对你有好处。
MJ虽然是个牛人,但从学术影响上真是不到vapnik一根毛。
learning
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : kernel 用在 SVM 也不是 Vapnik 的idea。 : margin 这个东东其实统计、规划里早就有了。 : 当然话说回来,graphical model 里的很多东西统计里也早就有了,machine learning : 的人把它发扬光大。 : 不讨论了。
|
N**D 发帖数: 10322 | 305 是啊
【在 i*********8 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 不讨论了对你有好处。 : MJ虽然是个牛人,但从学术影响上真是不到vapnik一根毛。 : : learning
|
N**D 发帖数: 10322 | 306 margin?
I need a rigous proof relating the generlaization performance of a
clasisifer
learning
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : kernel 用在 SVM 也不是 Vapnik 的idea。 : margin 这个东东其实统计、规划里早就有了。 : 当然话说回来,graphical model 里的很多东西统计里也早就有了,machine learning : 的人把它发扬光大。 : 不讨论了。
|
d******e 发帖数: 7844 | 307 估计这些人大部分就是看过个SVM的Tutorial,没几个人认真读过Learning Theory的东
西。
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : margin? : I need a rigous proof relating the generlaization performance of a : clasisifer : : learning
|
d******e 发帖数: 7844 | 308 Kernel的确是Grace Wahba最先用在Spline中的,但根本没几个人重视,呵呵。
你们说MJ把Graphical Model发扬光大,凭什么不允许Vapnik去光大RKHS?
learning
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : kernel 用在 SVM 也不是 Vapnik 的idea。 : margin 这个东东其实统计、规划里早就有了。 : 当然话说回来,graphical model 里的很多东西统计里也早就有了,machine learning : 的人把它发扬光大。 : 不讨论了。
|
q*w 发帖数: 313 | 309 大家说说MJ到底把pearl
的理论往前推了多少吧?
我看J Pearl的书有种顿悟的感觉。
为什么看MJ的东西从来没这种感觉?
我觉得Pearl是可以和Vapnik放在一起说的。
MJ还是差一些。
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Kernel的确是Grace Wahba最先用在Spline中的,但根本没几个人重视,呵呵。 : 你们说MJ把Graphical Model发扬光大,凭什么不允许Vapnik去光大RKHS? : : learning
|
N**D 发帖数: 10322 | 310 MJ 就是一有很多funding的prof而已
【在 q*w 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 大家说说MJ到底把pearl : 的理论往前推了多少吧? : 我看J Pearl的书有种顿悟的感觉。 : 为什么看MJ的东西从来没这种感觉? : 我觉得Pearl是可以和Vapnik放在一起说的。 : MJ还是差一些。
|
|
|
q*w 发帖数: 313 | 311 总结一下。其实就是时髦与深刻之争。
learning
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这几个MJ的fans可能太嫩了 : 不知道Vapnik–Chervonenkis theory 被普遍认为 "fundamental theory of learning : "
|
D***r 发帖数: 7511 | 312 做理论的看不起做应用的,所有学科都是如此
【在 q*w 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 总结一下。其实就是时髦与深刻之争。 : : learning
|
q*w 发帖数: 313 | 313 不是这样。
理论和应用只是研究的两个方向。
深刻与肤浅这个维度基本和前面的那个空间正交。
所以,不是看不起的问题,而是深刻程度不够。
应用做的好的人,完全可以鄙视推了一堆公式,自己都不理解含义的人。
【在 D***r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 做理论的看不起做应用的,所有学科都是如此
|
p*********g 发帖数: 226 | 314 本来不想再讨论了,有几点看来还是讲讲明白。
Vapnik 如果不到美国,估计 SVM 远不会像现在这么成功,他做了20年的separable,
单单这个在实用中基本不会work。让它真正实用的关键的两步:一是Cortes的 soft
margin,二是 Guyon 的 kernelization (Grace Wahba 不能算),两个都是 Vapnik
在 AT&T 的同事。
Vapnik 和 Chervonenkis 在统计学习的贡献自是有目共睹,但很多我们现在看到的SVM
和 max margin 的成果其实来自于许多人共同努力,名字想得到的就有Cortes, Guyon
, Shaw-Taylor, Schoekopf, Smola, Bartlett 等一长串。 所以不能把这些全都归于
Vapnik 一人。当然这点其实并不重要,东西好就行了。
一项工作的意思随着时间的变化而变化。在没有计算机的年代,自然所有这些 machine
learning 的东西都没有什么实用意义。在我们这个年代,frequentist 的方法自然会
盛行,因为我们有了_一定的_计算能力。随着计算技术的发展,Bayesian 的东西会有
更大的发展空间,因为现在Bayesian主要的困难是计算上的(比如integral),而就理
论而言,Bayesian 基本上优于 frequentist。
统计中被 Vapnik 忽略的东西其实就是 Bayes 的理论。Vapnik 觉得这些东西不够好,
于是自己发展了一套新的理论(比如 VC,以及和 empirical process 结合在一起的分
析),而且确实更有效,应用也更广。这些都 ground breaking,在90年代初,COLT
的人把他的东西奉若神明,as _the_ learning theory。90年代中开始,COLT 慢慢
地 diversify。谁有兴趣可以把它的东西 Bayes 化,有人已经做了不少,比如
Graepel, Shaw-Taylor, Seeger, Bartlett 等等。
现在_大部分_的学生自然不必再去仔细读 Vapnik 的书了,一些新的 bound (比如
Rademacher) 也已经广为流传,虽然它确实是一大瑰宝。既不必去 fan 任何人,也不
要看不起这看不起那,follow your heart and be objective,将来的事都难预料。 |
N**D 发帖数: 10322 | 315 还Bayesian
现在计算机那么厉害,有没有看看最大可解多大的问题? what is prior? why choose
one prior over another???? well, I know hyper prior?
当然,graphical model最好的地方是可以无限制灌水, Chinese resturant, India
buffeet, Mexico grill, you name it
再说,知道啥时ground breaking?
那些结合bayes 的bound, TTI的几个人做的,很牵强。最重要的,没有导致一个新的算
法,比如SVM.
SVM
Guyon
machine
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 本来不想再讨论了,有几点看来还是讲讲明白。 : Vapnik 如果不到美国,估计 SVM 远不会像现在这么成功,他做了20年的separable, : 单单这个在实用中基本不会work。让它真正实用的关键的两步:一是Cortes的 soft : margin,二是 Guyon 的 kernelization (Grace Wahba 不能算),两个都是 Vapnik : 在 AT&T 的同事。 : Vapnik 和 Chervonenkis 在统计学习的贡献自是有目共睹,但很多我们现在看到的SVM : 和 max margin 的成果其实来自于许多人共同努力,名字想得到的就有Cortes, Guyon : , Shaw-Taylor, Schoekopf, Smola, Bartlett 等一长串。 所以不能把这些全都归于 : Vapnik 一人。当然这点其实并不重要,东西好就行了。 : 一项工作的意思随着时间的变化而变化。在没有计算机的年代,自然所有这些 machine
|
N**D 发帖数: 10322 | 316 MJ的学生很擅长总结,发挥, 吹
根本不解决实际问题,
【在 q*w 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 总结一下。其实就是时髦与深刻之争。 : : learning
|
N**D 发帖数: 10322 | 317 这个强调SVM的成功在于soft margin 和kernel, 说明还需要看书,再研究研究。
再说这个frequentist, 实际中,用的很多,效果很好, generalized linear model.
well, you Bayes guy can see "we can get this from this this and that that
grphacial model, with this set of bullsh*t prior"
SVM
Guyon
machine
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 本来不想再讨论了,有几点看来还是讲讲明白。 : Vapnik 如果不到美国,估计 SVM 远不会像现在这么成功,他做了20年的separable, : 单单这个在实用中基本不会work。让它真正实用的关键的两步:一是Cortes的 soft : margin,二是 Guyon 的 kernelization (Grace Wahba 不能算),两个都是 Vapnik : 在 AT&T 的同事。 : Vapnik 和 Chervonenkis 在统计学习的贡献自是有目共睹,但很多我们现在看到的SVM : 和 max margin 的成果其实来自于许多人共同努力,名字想得到的就有Cortes, Guyon : , Shaw-Taylor, Schoekopf, Smola, Bartlett 等一长串。 所以不能把这些全都归于 : Vapnik 一人。当然这点其实并不重要,东西好就行了。 : 一项工作的意思随着时间的变化而变化。在没有计算机的年代,自然所有这些 machine
|
p*********g 发帖数: 226 | 318 > 这个强调SVM的成功在于soft margin 和kernel, 说明还需要看书,再研究研究。
你这个是完全的误解,这里很多人就是喜欢只及一点、不及其余。最后一次 respond
to you。
这些和 Vapnik 的东西都是缺一不可、相辅相成的。在实用上,没有soft margin 和
kernel,没有可能 work,也就不可能在90年代中叶把龙头从 neural network 那里扳
过来,SVM 也不会有多少人用。但这并不损害 Vapnik 学习理论的价值,而且显然这个比soft margin 和 kernel 更重要。 |
p*********g 发帖数: 226 | 319 >> 按你这个讨论评估MJ的话,那他就更没啥拿得出手的贡献。
这点从现在看,MJ 显然不能跟 Vapnik 比,不过人家还年轻,而且计算技术的发展将
来如何还不一定。
如果要看 Bayes 的应用,nando 有一些。还有号称最大的 Bayes application 是微软
剑桥研究院搞的 TrueSkill,Xbox 里面用得好好的。 |
p*********g 发帖数: 226 | 320 俺本来也没兴趣比较 Vapnik 和 MJ,没什么意思。出来发文,只是认为不应该把 SVM 的功劳全归于 Vapnik,客观为好。
好了,事实都摆在那儿了,见仁见智。你这种就没意思了,要谩骂的话,回你的 ChinaNews 去
吧。
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 你应该学会怎么藏拙 : : 个比soft margin 和 kernel 更重要。
|
|
|
p*********g 发帖数: 226 | 321 竞猜一下,为什么这个语法错误的句子没人去纠正。呵呵,其实是故意的。 |
c******r 发帖数: 300 | 322 Come on,
graphical model != Bayes
generalized linear model != frequentist
learn sme basic stat first before pouring this kind of groundless comments.
.
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这个强调SVM的成功在于soft margin 和kernel, 说明还需要看书,再研究研究。 : 再说这个frequentist, 实际中,用的很多,效果很好, generalized linear model. : well, you Bayes guy can see "we can get this from this this and that that : grphacial model, with this set of bullsh*t prior" : : SVM : Guyon : machine
|
l******e 发帖数: 470 | 323 没想到frequentist和bayesian吵到这个版上了
难得,搬个小板凳
.
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这个强调SVM的成功在于soft margin 和kernel, 说明还需要看书,再研究研究。 : 再说这个frequentist, 实际中,用的很多,效果很好, generalized linear model. : well, you Bayes guy can see "we can get this from this this and that that : grphacial model, with this set of bullsh*t prior" : : SVM : Guyon : machine
|
p*********g 发帖数: 226 | 324 呵呵,让它们去争吧,他们会说“不过是举个例子”等等。
反正俺无意非要说哪个方法好,哪个差,各有优劣。只要清楚认识到 SVM state of
the art 是很多人智慧的结晶就行了。等到计算机发展到高维积分变成小菜一蝶的时候
,Bayes自然就会更 popular。
还有,大家讨论问题语气平缓些,有话好好说。
【在 c******r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Come on, : graphical model != Bayes : generalized linear model != frequentist : learn sme basic stat first before pouring this kind of groundless comments. : : .
|
l******e 发帖数: 470 | 325
等到计算机发展到高维积分变成小菜一蝶的时候
~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~请预测一下这一天啥时候到来,让我有个盼头
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 呵呵,让它们去争吧,他们会说“不过是举个例子”等等。 : 反正俺无意非要说哪个方法好,哪个差,各有优劣。只要清楚认识到 SVM state of : the art 是很多人智慧的结晶就行了。等到计算机发展到高维积分变成小菜一蝶的时候 : ,Bayes自然就会更 popular。 : 还有,大家讨论问题语气平缓些,有话好好说。
|
p*********g 发帖数: 226 | 326 听说quantum 有戏,哈哈,听说而已。
其实真的运算能力强到 approximate inference 足够的程度也就行了。比如现实中很
多 NP-hard 问题的近似解就已经相当不错了。
【在 l******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : 等到计算机发展到高维积分变成小菜一蝶的时候 : ~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~~请预测一下这一天啥时候到来,让我有个盼头
|
l******e 发帖数: 470 | 327 等新算法吧,等计算机速度这是没边的事儿
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 听说quantum 有戏,哈哈,听说而已。 : 其实真的运算能力强到 approximate inference 足够的程度也就行了。比如现实中很 : 多 NP-hard 问题的近似解就已经相当不错了。
|
p*********g 发帖数: 226 | 328 两边一块儿等,呵呵。
【在 l******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 等新算法吧,等计算机速度这是没边的事儿
|
t******a 发帖数: 1200 | 329 http://en.wikipedia.org/wiki/All_your_base_are_belong_to_us
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 竞猜一下,为什么这个语法错误的句子没人去纠正。呵呵,其实是故意的。
|
G*****7 发帖数: 1759 | 330 all your bases are belong to us.
google it.
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 竞猜一下,为什么这个语法错误的句子没人去纠正。呵呵,其实是故意的。
|
|
|
G*****7 发帖数: 1759 | |
p*********g 发帖数: 226 | 332 :)
【在 G*****7 的大作中提到】![](/moin_static193/solenoid/img/up.png) : //hand
|
N**D 发帖数: 10322 | 333 do you know how to read?
Come on,
graphical model != Bayes
generalized linear model != frequentist
learn sme basic stat first before pouring this kind of groundless comments.
.
【在 c******r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : Come on, : graphical model != Bayes : generalized linear model != frequentist : learn sme basic stat first before pouring this kind of groundless comments. : : .
|
N**D 发帖数: 10322 | 334 高维积分,和curse of dimensionality (which is solved by vc dimension),
problem formulation are wrong
【在 p*********g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 呵呵,让它们去争吧,他们会说“不过是举个例子”等等。 : 反正俺无意非要说哪个方法好,哪个差,各有优劣。只要清楚认识到 SVM state of : the art 是很多人智慧的结晶就行了。等到计算机发展到高维积分变成小菜一蝶的时候 : ,Bayes自然就会更 popular。 : 还有,大家讨论问题语气平缓些,有话好好说。
|
q*w 发帖数: 313 | 335 部分同意。
高维积分,算法上不改进,计算机再快也没有用。
指数增长的算法,不是计算机快就可以解决问题的。
为什么说curse of dimensionality是formulation is wrong?
这个问题确实存在。只是谁也不知道怎么解。
甚至,我很悲观的认为,可能解的方法最近很难出来。
问问搞数学的就知道了。一个数学教授和我说,高维的优化,还是很困难。
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 高维积分,和curse of dimensionality (which is solved by vc dimension), : problem formulation are wrong
|
N**D 发帖数: 10322 | 336 我的理解是这样的
curse of dimenionality 的最初来源是density estimation, which is fundamental
problem in almost all engineering. In parametric form such as linear model,
it is believed that the number of data required is exponential of the number
of free parameters.
However, what VC dimension shows is that, the above understanding is not
correct, after taking into consideration the problem we want to solve.
For example, for classification, it is NOT true that "the fewer the number
of free parameters ", "the less complex problem it can tackle. Think sin(ax)
for classification in one dimension.
This shows that the curse of dimensionality is not a correctly formulated
problem. The reason is, there is no need.
Same for high-dimension integration. I believe that, with proper problem
formulation, high-dimenion ingegration in not needed. In other words, Bayes
average is not needed.
部分同意。
高维积分,算法上不改进,计算机再快也没有用。
指数增长的算法,不是计算机快就可以解决问题的。
为什么说curse of dimensionality是formulation is wrong?
这个问题确实存在。只是谁也不知道怎么解。
甚至,我很悲观的认为,可能解的方法最近很难出来。
问问搞数学的就知道了。一个数学教授和我说,高维的优化,还是很困难。
【在 q*w 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 部分同意。 : 高维积分,算法上不改进,计算机再快也没有用。 : 指数增长的算法,不是计算机快就可以解决问题的。 : 为什么说curse of dimensionality是formulation is wrong? : 这个问题确实存在。只是谁也不知道怎么解。 : 甚至,我很悲观的认为,可能解的方法最近很难出来。 : 问问搞数学的就知道了。一个数学教授和我说,高维的优化,还是很困难。
|
q*w 发帖数: 313 | 337 你的意思是说,feature 足够好,不用那么复杂高维的分类器,对吧?
问题是,现在很多问题,找好的feature,很难。
如果做分类的说,你feature要好。
提feature的人说,你的分类器要强大。
这就成了chicken-egg问题了。
事实上,处理很多高维问题,现存的方法也还可以。
比如Linear SVM.....
可以用,但不完美。但是总比没有用的好。
这也是我这么崇拜Vapnik的原因了。
fundamental
model,
number
not
number
sin(ax)
【在 N**D 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 我的理解是这样的 : curse of dimenionality 的最初来源是density estimation, which is fundamental : problem in almost all engineering. In parametric form such as linear model, : it is believed that the number of data required is exponential of the number : of free parameters. : However, what VC dimension shows is that, the above understanding is not : correct, after taking into consideration the problem we want to solve. : For example, for classification, it is NOT true that "the fewer the number : of free parameters ", "the less complex problem it can tackle. Think sin(ax) : for classification in one dimension.
|
r*y 发帖数: 706 | 338
NIPS=Neural Information Processing Systems?
http://books.nips.cc/nips22.html
【在 C*********e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 。。。ICML是这几年是水化趋势明显了。NIPS扯淡文章一直就有,从来没有 : 断过,NIPS牛在出了太多的好文章,好的结果一般prefer在NIPS上发出来
|
m****t 发帖数: 555 | 339 还真有人把SVM捧上了天。
在工业界,复杂的费时的算法很少用到的。
越是简单的,用的越多。 |
l******e 发帖数: 470 | 340 您老给我科普科普工业界用的简单高校的svm的替代品
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 还真有人把SVM捧上了天。 : 在工业界,复杂的费时的算法很少用到的。 : 越是简单的,用的越多。
|
|
|
m****t 发帖数: 555 | 341
这不是什么替代品的问题。SVM理论上好像很NB,但在工业上处理实际数据还赶不上
naive bayes 和 knn,至少就我所知的在实际中spam filtering是如此,因为我就是做
这个的。
naive bayes是用的最广的,没有原因,就是最成熟,最简单,最快,最容易实现。这
一点够了。
所以理论和实践是脱节的。
【在 l******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 您老给我科普科普工业界用的简单高校的svm的替代品
|
d******e 发帖数: 7844 | 342 你这种抬杠没什么营养。
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : 这不是什么替代品的问题。SVM理论上好像很NB,但在工业上处理实际数据还赶不上 : naive bayes 和 knn,至少就我所知的在实际中spam filtering是如此,因为我就是做 : 这个的。 : naive bayes是用的最广的,没有原因,就是最成熟,最简单,最快,最容易实现。这 : 一点够了。 : 所以理论和实践是脱节的。
|
m****t 发帖数: 555 | 343
这怎么是抬扛了?
靠理论上捧起来的东西,靠一些toy data的实验来说明性能多好的东西,在实际应用上
效果不怎么样,本身就说明了失败。
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 你这种抬杠没什么营养。
|
m****t 发帖数: 555 | 344 实践证明,理论上看起来很好的东西,实践中往往赶不上简单有效的方法。
看看前几年,我记得是2007 kdd cup优胜者用的什么方法,足以把一帮研究machine
learning新算法的人羞死。
这就是以拙胜巧,以简胜繁。 |
d******e 发帖数: 7844 | 345 说来说去,不还都是那点东西。你也没啥不得了的观点。
你以为现在的这些实用的模型都是一步到位的?不还是发展了几十年甚至上百年才成型
的。
科研本来99.99%都是炮灰,为的就是那0.01%的成果,人们要都是你这个想法,科学就
没得进步了。
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 实践证明,理论上看起来很好的东西,实践中往往赶不上简单有效的方法。 : 看看前几年,我记得是2007 kdd cup优胜者用的什么方法,足以把一帮研究machine : learning新算法的人羞死。 : 这就是以拙胜巧,以简胜繁。
|
d******e 发帖数: 7844 | 346 别把工业界捧得那么高,呵呵,说到底你也就是个技工而已。
SVM在生物医学的圈子里已经遍地开花了,别说人家华而不实,人家自娱自乐比你High
多了。
话说回来,瞧不起SVM的话,你就去弄点新东西,弄一个比SVM好的,大家肯定都来捧你。
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 实践证明,理论上看起来很好的东西,实践中往往赶不上简单有效的方法。 : 看看前几年,我记得是2007 kdd cup优胜者用的什么方法,足以把一帮研究machine : learning新算法的人羞死。 : 这就是以拙胜巧,以简胜繁。
|
w***g 发帖数: 5958 | 347 SVM好用尽人皆知。如果没有别的背景信息的前提下,第一个试的就是SVM。Meghat的帖
子好歹让大家知道了对spam filtering来说naive bayes有可能比SVM好用。spam
filtering是一个很重要的应用, 所以我觉得Meghat的帖子还是很有价值的。
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 说来说去,不还都是那点东西。你也没啥不得了的观点。 : 你以为现在的这些实用的模型都是一步到位的?不还是发展了几十年甚至上百年才成型 : 的。 : 科研本来99.99%都是炮灰,为的就是那0.01%的成果,人们要都是你这个想法,科学就 : 没得进步了。
|
d******e 发帖数: 7844 | 348 ...你修Machine Learning课的时候,难道老师没提过么?Naive Bayes的一个典型的应
用实例就是Spam filtering,这个用不着他来告诉大家吧。
【在 w***g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : SVM好用尽人皆知。如果没有别的背景信息的前提下,第一个试的就是SVM。Meghat的帖 : 子好歹让大家知道了对spam filtering来说naive bayes有可能比SVM好用。spam : filtering是一个很重要的应用, 所以我觉得Meghat的帖子还是很有价值的。
|
m****t 发帖数: 555 | 349
High
你。
别胡吹什么生物医学了,分子生物学就是最大的伪科学。
那垃圾东西,基本都是骗钱的。
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 别把工业界捧得那么高,呵呵,说到底你也就是个技工而已。 : SVM在生物医学的圈子里已经遍地开花了,别说人家华而不实,人家自娱自乐比你High : 多了。 : 话说回来,瞧不起SVM的话,你就去弄点新东西,弄一个比SVM好的,大家肯定都来捧你。
|
m****t 发帖数: 555 | 350
算了吧。我上machine leaning课的时候,你还不知道在哪呢。
我发顶级会议文章,有纯理论推倒和定理的时候,你还不知道在干啥呢。
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : ...你修Machine Learning课的时候,难道老师没提过么?Naive Bayes的一个典型的应 : 用实例就是Spam filtering,这个用不着他来告诉大家吧。
|
|
|
m****t 发帖数: 555 | 351
SVM只是理论上有那么一套。实践中的数据和做研究的数据差别很大。
不说其他的,垃圾邮件过滤,knn效果就比naive bayes好,都比SVM好。
【在 w***g 的大作中提到】![](/moin_static193/solenoid/img/up.png) : SVM好用尽人皆知。如果没有别的背景信息的前提下,第一个试的就是SVM。Meghat的帖 : 子好歹让大家知道了对spam filtering来说naive bayes有可能比SVM好用。spam : filtering是一个很重要的应用, 所以我觉得Meghat的帖子还是很有价值的。
|
d******e 发帖数: 7844 | 352 你也就这点能耐了,估计你也只能用用KNN或者Naive Bayes。
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : SVM只是理论上有那么一套。实践中的数据和做研究的数据差别很大。 : 不说其他的,垃圾邮件过滤,knn效果就比naive bayes好,都比SVM好。
|
d******e 发帖数: 7844 | 353 呵呵,没看出来,大侠把你的文章贴出来看看吧,看看你的影响力和SVM比如何。
KNN,Naive Bayes在你那里再NB也不是你自己的东西,做点NB的东西给大家看看,别总
一天SVM不行,SVM不行的,耍嘴皮子谁不会啊,亮亮你的真本事啊。
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : SVM只是理论上有那么一套。实践中的数据和做研究的数据差别很大。 : 不说其他的,垃圾邮件过滤,knn效果就比naive bayes好,都比SVM好。
|
m****t 发帖数: 555 | 354
哈哈。
你一小P孩 ,刚接触了几天machine learning就不知道天高地厚了。
别装B.
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 你也就这点能耐了,估计你也只能用用KNN或者Naive Bayes。
|
d******e 发帖数: 7844 | 355 也不知道谁最先开始装B的。
别人捧一捧SVM,你就不爽?
NB的话,你找人家Vapnik去较劲。
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : 哈哈。 : 你一小P孩 ,刚接触了几天machine learning就不知道天高地厚了。 : 别装B.
|
m****t 发帖数: 555 | 356
文章就不贴了吧。不想被人肉。
不过ijcai两篇,而且是有理论推导的,应该不差吧。
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 呵呵,没看出来,大侠把你的文章贴出来看看吧,看看你的影响力和SVM比如何。 : KNN,Naive Bayes在你那里再NB也不是你自己的东西,做点NB的东西给大家看看,别总 : 一天SVM不行,SVM不行的,耍嘴皮子谁不会啊,亮亮你的真本事啊。
|
m****t 发帖数: 555 | 357
我有权利发表我的看法,关你 什么事了?
一看到说SVM不行,跟挖了你 祖坟似的?
莫非Vapnik是你 爷爷?
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 也不知道谁最先开始装B的。 : 别人捧一捧SVM,你就不爽? : NB的话,你找人家Vapnik去较劲。
|
d******e 发帖数: 7844 | 358 我也有权利发表我的看法啊。
说你装B,难道不对么?哈哈哈
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : 我有权利发表我的看法,关你 什么事了? : 一看到说SVM不行,跟挖了你 祖坟似的? : 莫非Vapnik是你 爷爷?
|
d******e 发帖数: 7844 | 359 来啊,贴出来看看,让大家看看到底多理论,装B就装到底,半路气馁,难道你肾亏?
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : 我有权利发表我的看法,关你 什么事了? : 一看到说SVM不行,跟挖了你 祖坟似的? : 莫非Vapnik是你 爷爷?
|
m****t 发帖数: 555 | 360
好啊。
我说你 是Vapnik私生子,是婊子养的,这就是我的看法。
【在 d******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 我也有权利发表我的看法啊。 : 说你装B,难道不对么?哈哈哈
|
|
|
m****t 发帖数: 555 | 361 某人把Vapnik捧上了天,原来是私生子。
可怜啊,Vapnik都没承认你,你还去给人舔屁股。 |
h***e 发帖数: 20195 | 362 老夫举例说个其他领域的一个更牛的,MIT的ROBERT LANGER
【在 r********3 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 这不就是传说中的Michael Jordan吗?他怎么只能用牛人来形容啊,他应该可以归结到 : 神人的地步。他的学生,Andraw N.g这些都超级大牛。他教出来的学生形成了一个“ : Jordan系”,把AI最牛的NIPS conference垄断了,从而导致了ICML这些的成长。 : 看过他好多Machine Learning的paper,他在AI方面的功底,早已经超越的普通人类的 : 境界。
|
l******e 发帖数: 470 | 363 你的意思是machine learning已经研究完了,大家都可以转行了吧。
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 实践证明,理论上看起来很好的东西,实践中往往赶不上简单有效的方法。 : 看看前几年,我记得是2007 kdd cup优胜者用的什么方法,足以把一帮研究machine : learning新算法的人羞死。 : 这就是以拙胜巧,以简胜繁。
|
o****o 发帖数: 8077 | 364 Dempster and Rubin at Harvard, super Cow in Stat ah....any methods build on
EM will have to cite their '77 paper, as well as a '83 paper by Liu which
proves existence of local ML solution
【在 c******r 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 说到引用,这个文章很夸张 : Dempster, A.P.; Laird, N.M.; Rubin, D.B. (1977). "Maximum Likelihood from : Incomplete Data via the EM Algorithm". : citation > 20k : 另外Dempster : Covariance selection Biometrics 28, 157-175, 1972 : 提出了undirected graphical model for Gaussian distribution : 可惜没啥人知道这个。。。 : MJ也就是把graphical model在cs中应用发扬光大,算不上什么顶级大师吧。
|
m****t 发帖数: 555 | 365
一边呆着去吧,又一个装B的。
你有什么哪得出手的来得瑟一下?
除了会Vapnic舔屁股还会干啥?他真的比你爹都亲啊。
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 说了半天果然是个半瓶醋,IJCAI也来得瑟,也太贻笑大方了。
|
m****t 发帖数: 555 | 366
讲理是对君子而言的。
你这种垃圾,也配?
【在 I*****2 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 就这德行啊,我都后悔我回了你的帖。
|
o****o 发帖数: 8077 | 367 NetFlix? The winner used SVD based algorithms, right?
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 实践证明,理论上看起来很好的东西,实践中往往赶不上简单有效的方法。 : 看看前几年,我记得是2007 kdd cup优胜者用的什么方法,足以把一帮研究machine : learning新算法的人羞死。 : 这就是以拙胜巧,以简胜繁。
|
m****t 发帖数: 555 | 368
不是这个意思。
我的意思是学术研究和实际应用仍然有很大的gap。在学术上的新东西新算法,仍然不
成熟。
【在 l******e 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 你的意思是machine learning已经研究完了,大家都可以转行了吧。
|
r********3 发帖数: 2998 | 369 说说看,什么算法啊?
我也觉得很多machine learning的不靠谱。
为了追求一点精度上提升,还不如多去开采一些数据。
【在 m****t 的大作中提到】![](/moin_static193/solenoid/img/up.png) : : 不是这个意思。 : 我的意思是学术研究和实际应用仍然有很大的gap。在学术上的新东西新算法,仍然不 : 成熟。
|
F*P 发帖数: 3204 | 370 崇拜一下啊。。。。。。
【在 G*****7 的大作中提到】![](/moin_static193/solenoid/img/up.png) : 周志华不如香港的Xu Lei : Bayesian Ying-Yang System and Harmony Learning Theory : 采撷阴阳,济天下之和谐大成 : xu出于jordan而胜于jordan
|
|
|
b******s 发帖数: 589 | |
b******x 发帖数: 826 | 372 After only 5 years, so many things have changed, totally |
M***6 发帖数: 895 | 373 你这坟挖得感觉像电影的结束场景啊。。。不管之前吵得多凶,现在都安静了。。然后
后生出场。。。
【在 b******x 的大作中提到】![](/moin_static193/solenoid/img/up.png) : After only 5 years, so many things have changed, totally
|