由买买提看人间百态

boards

本页内容为未名空间相应帖子的节选和存档,一周内的贴子最多显示50字,超过一周显示500字 访问原贴
CS版 - 请问一下:如何定量的比较两个参数不同的分布的不同?
相关主题
如何矢量化地比较两个参数不同的分布的不同?请问这样的distance怎么计算?
Kullback–Leibler divergence 中文叫什么啊?数学模型来模拟电话交换机上 phone call in
请教一个问题,关于统计和分布~~~~~[转载] 一个类似coupon collector的概率问题
请教一个distribution之间的likelihood问题 (转载)Game Theory在ad hoc网络中的应用
请教一个画图的问题 (某个点可能出现两个值的情况)。Re: 修改个人参数
[合集] 问个 gaussian distribution distance的问题问一个关于normalization的问题
请教算法~~大规模分布系统下的高效算法??
问个正态分布平均值的问题EM 算法
相关话题的讨论汇总
话题: 分布话题: divergence话题: leibler话题: kullback话题: 两个
进入CS版参与讨论
1 (共1页)
a***n
发帖数: 404
1
比如有两个正态分布,只是 参数 有些不同,如何定量的比较这两个分布的区别的大小?
谢谢!!
s******e
发帖数: 285
2
student T-test?

小?

【在 a***n 的大作中提到】
: 比如有两个正态分布,只是 参数 有些不同,如何定量的比较这两个分布的区别的大小?
: 谢谢!!

a***n
发帖数: 404
3
这个行么? 可否具体讲讲~~~

【在 s******e 的大作中提到】
: student T-test?
:
: 小?

b*********d
发帖数: 139
4
Kullback–Leibler divergence
http://en.wikipedia.org/wiki/Kullback-Leibler_divergence

小?

【在 a***n 的大作中提到】
: 比如有两个正态分布,只是 参数 有些不同,如何定量的比较这两个分布的区别的大小?
: 谢谢!!

a***n
发帖数: 404
5
这个不知道 适不适合 一般的任意分布(不限正态分布)。
现在的情况是:根据一定数量的观察值,比如  N1个观察值,模拟出一个正态分布
,得出各个模型参数。然后,继续获得了更多的观察值,于是手里有了 N1+N2
个观察值,这个时候重新模拟出一个分布曲线,不知道 K-L divergence能否合适的表
达出由于新的观察值得加入而导致的分布的差异。
谢谢!

【在 b*********d 的大作中提到】
: Kullback–Leibler divergence
: http://en.wikipedia.org/wiki/Kullback-Leibler_divergence
:
: 小?

b*********d
发帖数: 139
6
挂我第二作者我就讲!
kidding!
自己看看WIKI吧,应该是可以。而且很符合。
Kullback–Leibler divergence有叫information gain,非对称的function,真好用于
你的情况。
InfoGain(New|Old).

【在 a***n 的大作中提到】
: 这个不知道 适不适合 一般的任意分布(不限正态分布)。
: 现在的情况是:根据一定数量的观察值,比如  N1个观察值,模拟出一个正态分布
: ,得出各个模型参数。然后,继续获得了更多的观察值,于是手里有了 N1+N2
: 个观察值,这个时候重新模拟出一个分布曲线,不知道 K-L divergence能否合适的表
: 达出由于新的观察值得加入而导致的分布的差异。
: 谢谢!

a***n
发帖数: 404
7
汗~~ 挂你第二作者,俺这个作业就要0蛋了。。呵呵。 :P
作业要提一个新的idea,俺从来没有做过的方向,俺就寻思用个犄角旮旯的方法,这样就
谁也看不懂啦~~ 瓦卡卡。
谢谢,正在看这个Wiki, 以前用过information gain, 是decision tree里面经常提到
,不过没有怎么关注这个 K-L divergence... 看来现在不看不行了~~
多谢大牛帮助~

【在 b*********d 的大作中提到】
: 挂我第二作者我就讲!
: kidding!
: 自己看看WIKI吧,应该是可以。而且很符合。
: Kullback–Leibler divergence有叫information gain,非对称的function,真好用于
: 你的情况。
: InfoGain(New|Old).

a***n
发帖数: 404
8
不知道kld 对于 比较 joint distribution 是不是一样有很好的效果阿?

【在 b*********d 的大作中提到】
: 挂我第二作者我就讲!
: kidding!
: 自己看看WIKI吧,应该是可以。而且很符合。
: Kullback–Leibler divergence有叫information gain,非对称的function,真好用于
: 你的情况。
: InfoGain(New|Old).

a***n
发帖数: 404
9
KL-D 比较两个分布的时候好像只是给出一个值。
即: 如果分布 A, B, C
KL(A,B) = a, KL(A, C) = a. 虽然分布A与B之间的差别大小与 A和C之间的差别的大小
都是a,但是并不表明 B与C 分布相同。因为 KLD 只表示了分布的区别的大小,却没有
表示区别的方向。
有没有能够既表达两个分布的区别的值得大小,又表达分布差异的方向或者类似东西的
函数呢?
谢谢!

【在 a***n 的大作中提到】
: 不知道kld 对于 比较 joint distribution 是不是一样有很好的效果阿?
a***n
发帖数: 404
10
不知道用 KLD 辅以 mean 和 deviation 能不能表达两个分布的差别大小和方向?有没
有系统的,量化的讨论这个的阿?

【在 a***n 的大作中提到】
: KL-D 比较两个分布的时候好像只是给出一个值。
: 即: 如果分布 A, B, C
: KL(A,B) = a, KL(A, C) = a. 虽然分布A与B之间的差别大小与 A和C之间的差别的大小
: 都是a,但是并不表明 B与C 分布相同。因为 KLD 只表示了分布的区别的大小,却没有
: 表示区别的方向。
: 有没有能够既表达两个分布的区别的值得大小,又表达分布差异的方向或者类似东西的
: 函数呢?
: 谢谢!

1 (共1页)
进入CS版参与讨论
相关主题
EM 算法请教一个画图的问题 (某个点可能出现两个值的情况)。
[合集] 有没有分布函数的分布 这个概念? (转载)[合集] 问个 gaussian distribution distance的问题
问个 SVM 分类器画 ROC 的问题。。。请教算法~~
问个c/c++问题问个正态分布平均值的问题
如何矢量化地比较两个参数不同的分布的不同?请问这样的distance怎么计算?
Kullback–Leibler divergence 中文叫什么啊?数学模型来模拟电话交换机上 phone call in
请教一个问题,关于统计和分布~~~~~[转载] 一个类似coupon collector的概率问题
请教一个distribution之间的likelihood问题 (转载)Game Theory在ad hoc网络中的应用
相关话题的讨论汇总
话题: 分布话题: divergence话题: leibler话题: kullback话题: 两个