由买买提看人间百态

boards

本页内容为未名空间相应帖子的节选和存档,一周内的贴子最多显示50字,超过一周显示500字 访问原贴
Statistics版 - 关于使用adaptive lasso中weight的问题
相关主题
R里面regression 变量选择的package?##面试过了,请教问题##
请问大家现在做adaptive LASSO都用R的什么package?新手请教logistic regression
regression的时候什么时候要standardize variables?[合集] Questions about logistic regression
请教一下ridge regression。One interview question:) Looking for help
抓狂!为啥选出来的predictor都这么差logistic regression 问题
问个关于lasso的问题请问能用glmnet实现weighted least square regularization吗
多大的data算是large data set?请教确定weights 的方法
请教一个lasso的问题,如何选定最后的model统计专业找银行工作,需要有哪些金融的知识
相关话题的讨论汇总
话题: lasso话题: glmnet话题: adaptive话题: weight话题: ridge
进入Statistics版参与讨论
1 (共1页)
d******g
发帖数: 130
1
关于使用glmnet实现adaptive lasso,对于有大量input variable,考虑multi-
collinearity,想问问大家是不是先run ridge regression,将ridge regression得到的beta绝对值求倒数,然后作为weight赋值给"glmnet"中的"weight" option。 去实现adaptive LASSO.
非常感谢各种input!
d******g
发帖数: 130
2
关于使用glmnet实现adaptive lasso,对于有大量input variable,考虑multi-
collinearity,想问问大家是不是先run ridge regression,将ridge regression得到的beta绝对值求倒数,然后作为weight赋值给"glmnet"中的"weight" option。 去实现adaptive LASSO.
非常感谢各种input!
h******o
发帖数: 39
3
有没有大牛回答一下这个问题啊~
多谢~
o****o
发帖数: 8077
4
Isn't this the recommendation from Zou's original paper (2006 JASA)?

的beta绝对值求倒数,然后作为weight赋值给"glmnet"中的"weight" option。 去实现
adaptive LASSO.

【在 d******g 的大作中提到】
: 关于使用glmnet实现adaptive lasso,对于有大量input variable,考虑multi-
: collinearity,想问问大家是不是先run ridge regression,将ridge regression得到的beta绝对值求倒数,然后作为weight赋值给"glmnet"中的"weight" option。 去实现adaptive LASSO.
: 非常感谢各种input!

D**u
发帖数: 288
5
一个历时两年的问题终于被解答了
s******y
发帖数: 65
6
如果考虑collinearity就用ridge,不然就用ols。
D**u
发帖数: 288
7
首先纠正一下楼主,应该是在glmnet用penalty.factor option,weight option 是针
对observation的。
再者,有谁能share一下experience,证实用这种方法(ridge output to lasso),确
实可以提高 model performance的么?
我得到的结果都很糟糕,根本不如直接用Lasso。
D**u
发帖数: 288
8
又研究了一下,结果很棒,key is 在glmnet 的option中一定要加上standardize=
FALSE,因为大多数的结果都是不需要standardize的
1 (共1页)
进入Statistics版参与讨论
相关主题
统计专业找银行工作,需要有哪些金融的知识抓狂!为啥选出来的predictor都这么差
weighted correlation的问题问个关于lasso的问题
Weighted logistic Regression多大的data算是large data set?
model的predictors之间有multi-colinearity怎么办?请教一个lasso的问题,如何选定最后的model
R里面regression 变量选择的package?##面试过了,请教问题##
请问大家现在做adaptive LASSO都用R的什么package?新手请教logistic regression
regression的时候什么时候要standardize variables?[合集] Questions about logistic regression
请教一下ridge regression。One interview question:) Looking for help
相关话题的讨论汇总
话题: lasso话题: glmnet话题: adaptive话题: weight话题: ridge