P*********t 发帖数: 4451 | 1 【 以下文字转载自 Quant 讨论区 】
发信人: echostate (AI), 信区: Quant
标 题: Re: 什么是bayesian optimization?
发信站: BBS 未名空间站 (Tue Mar 23 12:08:15 2010, 美东)
Bayesian Optimization实际上是比较奇怪的东西
因为真正的Bayesian不应该做Optimization
具体如下(个人见解):
==========================================================
是否使用prior不是区分Bayesian和Frequentist的关键
他们真正的区别是 是否相信存在一个(未知的)真参数
Bayesian把likelihood和prior放一起作为参数的posterior
Frequentist把lost和regularization penalty放一起作为参数的regularized loss
这两个框架基本是一一对应的:
一个likelihood对一个lost
一个prior对一个regularization p | P*********t 发帖数: 4451 | |
|