s*********e
发帖数: 1051 | 1 have you heard of non-parametric statistics? |
|
Y***Y
发帖数: 180 | 2 来自主题: Statistics版 - 问个面试题 nonparametric modeling什么时候用？优劣 compared to parametric modeling？ 给
个需要用nonparametric 的例子？
这个问题怎么回答比较好，感觉我想到的不是很全面。 |
|
D*********2
发帖数: 535 | 3 来自主题: Statistics版 - 问个面试题 wiki Non-parametric statistics |
|
m*******e
发帖数: 44 | 4 Help, Masters! I am struggling with how to estimate the mean survival time
under different distributions in parametric regression method. Would you
please give a reference to books that give the formula for the mean survival
time, or show me how to derive them? Thank you very much.
Meta |
|
s***g
发帖数: 299 | 5 做non parametric test 的时候不能做，出现这个error,怎么给fix一下呢？
谢谢 |
|
Y******Y
发帖数: 8753 | 6 第一个model用age作为time scale, 它是通过对entry age做left truncation以及
assume baseline hazard is a function of age来adjust for age. 并且baseline
hazard里面对age effect没有做任何的parametric assumption. 所以在第一个model里
面你是不需要另外将age当作是covariate来adjust。
第二个model是用time on study作为time scale,这个你要adjust for age as a
covariate.这个model你是assume age的effects是exponentially。
两个model都是valid的。但是要注意这两个models大部分时候不是等价的，如果你耐心
写出他们的partial likelihood,他们是不一样。
hope this helps. |
|
i******5
发帖数: 148 | 7 【 以下文字转载自 Dreamer 讨论区 】
发信人: Dreamer (不要问我从哪里来), 信区: Dreamer
标 题: 我是不是真的没救了，大家进来看一下。
发信站: BBS 未名空间站 (Sun Jan 15 00:18:55 2012, 美东)
请把我这个帖子转到统计版，谢谢！
在写这个帖子之前的5分钟，我真的觉得我自己没救了。我是一个统计的博士，在一个前100左右的大学今年博士毕业了。我成绩不好，博士的gpa只有3.6，在我们系老中里排倒数第一，要不是系里有几个老美的博士生垫底，系里可能就把我kick out 了，在一个full professor手底下干活，总是不能让他满意，本来他想让我2010年毕业，无奈，我research太差，托到2011年底才毕业的。因为他本来想让我2010年毕业，我2010年初开始投简历，找工作，说到找工作，那真是我的痛中之痛，算起来从2010年初到现在，两年了，我断断续续的投简历，电话面试了将近30个公司，onsite了三家公司，我关于我的research 的面试问题，回答的都还凑合，但就是一到problem solving上就傻眼了，... 阅读全帖 |
|
m********l
发帖数: 791 | 8 mark.
============================
在写这个帖子之前的5分钟，我真的觉得我自己没救了。我是一个统计的博士，在一个
前100左右的大学今年博士毕业了。我成绩不好，博士的gpa只有3.6，在我们系老中里
排倒数第一，要不是系里有几个老美的博士生垫底，系里可能就把我kick out 了，在
一个full professor手底下干活，总是不能让他满意，本来他想让我2010年毕业，无奈
，我research太差，托到2011年底才毕业的。因为他本来想让我2010年毕业，我2010年
初开始投简历，找工作，说到找工作，那真是我的痛中之痛，算起来从2010年初到现在
，两年了，我断断续续的投简历，电话面试了将近30个公司，onsite了三家公司，我关
于我的research 的面试问题，回答的都还凑合，但就是一到problem solving上就傻眼
了，还有就是我的性格不好，有一家公司曾经很诚心的招我，记得和那个hiring
manager job lunch的时候，他一个劲得和我套近乎，说，我们搞得东西不难，主要是
想招一个性格比较好，经常笑容满面地人，有统计... 阅读全帖 |
|
n*****t
发帖数: 41 | 9 谢谢，文件如下。我只要读取最后一个数，就是那个likelihood的数值。
MERLIN 1.1.2 - (c) 2000-2007 Goncalo Abecasis
References for this version of Merlin:
Abecasis et al (2002) Nat Gen 30:97-101 [original citation]
Fingerlin et al (2004) AJHG 74:432-43 [case selection for
association studies]
Abecasis and Wigginton (2005) AJHG 77:754-67 [ld modeling, parametric
analyses]
Fingerlin et al (2006) Gen Epidemiol 30:384-96 [sex-specific maps]
Chen and Abecasis (2007) AJHG 81:913-26 [qtl assoc... 阅读全帖 |
|
w*******n
发帖数: 469 | 10 I would rather use no-parametric method, like Wilcoxon-Mann-Whitney test
since you have a small sample size. |
|
m******u
发帖数: 277 | 11 总结一下面试被问到的一些问题。
General questions:
- Why are you interested in this position?
- Tell me something about yourself.
- Give me an example how you deal with challenging problems.
- Describe how you deal with multi tasks.
- Show us a writing example that you recently completed.
- What is your career goal in 5 years?
- How do you communicate with your collaborators?
- Have you ever worked on a project in a team? How did you do it?
Technical questions:
- How do you describe your SAS/R skills?
- Where d... 阅读全帖 |
|
|
|
d******r
发帖数: 193 | 14 手头上只有R和matlab。这两个软件有对应的么？ |
|
c********d
发帖数: 253 | 15 R中的lowess和loess function可以做的。你用R help查一下怎么用就可以了。
包子plz。 |
|
d******r
发帖数: 193 | 16 包子已发，非常感谢。不过大略看了下只有提供polynomial regression.有没有提供
logistic和probit的呢？ |
|
c********d
发帖数: 253 | 17 我没用r做过logistic的情况，不过我觉得应该是可以的。不行的话你可以用r去fit
GAM model for logistic，用gam function in r。 |
|
f*******c
发帖数: 56 | 18 Please contact Professor Wang directly if you are an statistical expert in
the fields mentioned below.
************************************************************************
Dear Colleague,
I would like to cordially invite you to consider contributing your expertise
to a forthcoming book entitled Encyclopedia of Business Analytics and
Optimization. As Editor, I am actively searching for quality material that
would be of interest to our audience. This is a wonderful opportunity since
contribut... 阅读全帖 |
|
u****m
发帖数: 118 | 19 Hi
I'm not a stat expert so my question may be really naive.
Is it possible to conduct a correlation analysis for ONE person? The
unit of analysis (case) however is not a person but an instance that occurs
at a time.
Below is a mock up data for ONE person who has different values for
variable A and variable B for each week. I want to test if variable A and
Variable B are correlated across weeks for this (ONE) person?
CASES, | Variable A, | Variable B
week1, | 2, | 3
w... 阅读全帖 |
|
h***x
发帖数: 586 | 20 CALIFORNIA:
0000087272
SAS Programmer (12m)
Bachelor's or Masters in Computer Science or other relevant (Engineering)
degrees with 5+ years of pharmaceutical experience preferred- The work
experience should include at least two years of technical leadership in a
statistical programming environment in a pharmaceutical or biotechnology
environment including the analysis and reporting of clinical trial data-
Knowledge and application of p-values, confidence intervals, linear
regression analysis, ad... 阅读全帖 |
|
c********d
发帖数: 253 | 21 GEE要求missing data的mechanism一定的是MCAR，MCAR可以用model去test，简单来说
就是假设missing依赖于一些observed的covariates，然后建一个logistic model，
regress missing indicator against these covariates，然后test 这些covariates
的coefficients是否为０，为０的话就是MCAR。照你的情况，你就regress missing
indicator against time and x就好了。如果你想做prediction，用random effect
model比较好，否则还是GEE吧，毕竟GEE是semi－parametric的，assumption少一些。 |
|
c*****a
发帖数: 808 | 22 感觉很重要的课，好像是median test,ranks, kolmogorov什么的 |
|
|
|
G***s
发帖数: 10030 | 25 我去年也问过这个问题，然后学了，不过学的不好（我不是学统计的），
现在估计全忘了：（ |
|
t*****8
发帖数: 157 | 26 请问比较俩组mean value, 是不是先要test数据是不是normal distribution,如果是用
ttest, 如果不是，用non parametric testing-wilcoxon-mann-whitney test？
那可不可以，assume数据是normal的，然后用t-test?
谢谢 |
|
t******i
发帖数: 56 | 27 遇到一个问题，关于survival的。
就是parametric（比如specify了exponential distribution）和cox regression（不
specify任何distribution），SAS results里面都会给出parameter estimate beta。
对这两种情况来说，hazard ratio都是exp(beta)么？都可以用hazard ratio的
interpretation么？
看版上哪位同学能不能指点下。包子答谢。 |
|
P****D
发帖数: 11146 | 28 不是。
accelerated failure time model（parametric model不止这一种，不过我估计你指的
是这个）本身没有hazard ratio这个概念，它的研究对象是accelerated failure time
，好比说，肺癌病人吃了新研发出来的药物A，那么他的生存时间会比吃老的药物B的病
人长20%。hazard ratio不能这样理解。
在AFT假设了Weibull distribution（exponential是Weibull的一种特殊情况）的时候
，AFT的结果，可以转化成hazard ratio（自然也就可以用hazard ratio的
interpretation），这是它的一个数学特性。怎么转化，自己去看SAS Help里的公式。
其他distribution，没有这个特性，也就不能转化成hazard ratio。
同学，如果你是学生统或统计的，那么还是回去仔细看看讲义再做作业吧，把概念搞清
楚是应用的基础。 |
|
|
|
s********1
发帖数: 54 | 31 ______________________________________________________________________
In terms of the variance structure
______________________________________________________________________
Normal structure depend on each individual,Spatial structure depends on the
distances between two points and compound, etc.
______________________________________________________________________
In terms of the likelihood:
______________________________________________________________________
The PL method is based on Wol... 阅读全帖 |
|
r*****d
发帖数: 346 | 32 应该要认为每个网站得到的是一串时间序列,然后建立一个hierarchical model:
\Alpha is the hyper prior which has pdf p(\Alpha), and then specify the
conditional distribution \Theta|\Alpha ~ f(\Theta|\Alpha), and next given \
Theta, Y_i's are independent and can be parametrized by \Theta.
Then calculate the joint posterior distribution of (\Theta, \Alpha) given
the observed data, and go from there.
只是初步的想法，不知道是否make sense. |
|
s*********e
发帖数: 1051 | 33 first of all, do not misuse the term "unbalanced".
secondly, if the event rate is too low, then the logistic regression won't
work anyway regardless of bagging or not. but in your case, 1/8 is not bad
at all.
thirdly, in case of extremely rare event, you should consider non-parametric
models such as tree-based / rule-based / nnet either directly or indirectly
with a 2-stage approach. |
|
s*********e
发帖数: 1051 | 34 first of all, do not misuse the term "unbalanced".
secondly, if the event rate is too low, then the logistic regression won't
work anyway regardless of bagging or not. but in your case, 1/8 is not bad
at all.
thirdly, in case of extremely rare event, you should consider non-parametric
models such as tree-based / rule-based / nnet either directly or indirectly
with a 2-stage approach. |
|
a****g
发帖数: 8131 | 35 parametric, nonparamtric, semiparametric
what are the differences among them
if you are given a case, how would you crack it、
basically you can find sas examples for each of them and after learning the
sample cases, you can answer the questions quite well
but, it will take some time if you haven't done any of them
good luck |
|
|
j****o
发帖数: 573 | 37 non-parametric methods?
Spearman’s R
Kendall’s tau |
|
w*******9
发帖数: 1433 | 38 放狗搜了下，发现这个paired survival data基本上都是假定parametric copula，比
如bivariate exponential之类的。网上是有些方法算sample size的。 |
|
w*******9
发帖数: 1433 | 39 1） 同site不同周的observations独立吗？不独立的话如何刻画dependence?
2) 一共就过去10周的data, parametric 更可行。而且若是过去10周也有0出现，你
也不知道那个0是不是因为睡着了，笼统地Normal distribution 不太好，因为1）确实
有正的概率睡着，所以有正概率exactly 取值0，所以mixture还是更合理一些 2）即使
能很准确地估计normal 的mean and variance, P(X<=0) 表示的是中和了睡着和不睡着
后的出现0的概率，而不是你想要的“若不睡着，出现0的概率”。
3） 同一个site数据太少，是否可以borrow strength from other sites using mixed
model? 比如不同site睡着的概率一样或服从某分布。
我瞎讲的。理论上讲讲大家都会，关键是有没有validation dataset 来评估。 |
|
k*z
发帖数: 4704 | 40 Boostrap? Jacknife or Non-Parametric? |
|
w*******9
发帖数: 1433 | 41 Just my two cents: K-S比较两个分布,这是个无穷维的问题，MW比较两个mean/median
,是个一维问题，比较一维的东西更容易，也就是说MW对检测某类问题（更具体点，平
移）power更大。但是如果不是平移那么K-S的power更大，但也只是相对的大，实际上
也是蛮低的。这是为什么大家平时数据不够大的时候不太用k-s的原因。以我有限的知
识来看，统计里比较两个无穷维的东西，绝大多数的统计量都是简化成比较两个有限维
的东西，就是为了追求更大的power。通常有很多方法转化成低维，所以同一个问题会
有好多测试方法，如何运用取决于你对自己的data 认识多少，对不同的test认识多少
。本质上来说K-S 是纯nonparametric, MW是semi-parametric，取舍就看你的model
assumption 对你的data适用不适用。 |
|
s********a
发帖数: 328 | 42 to me it seems to be a failure time / survival analysis problem. Isn't this
how failure time theory first came about (testing light bulb's life span)?
The model can be either semiparametric addictive hazard (Cox/proportional
hazard) or multiplicative hazard or fully parametric with exponential/gamma
assumption. Once you have the hazard function corresponding current state of
real-time sensors, you can calculate the survival function S(t)=exp(-
cumulative hazard) and find out the probability of f... 阅读全帖 |
|
c*********y
发帖数: 122 | 43 The population has been split into test and control. Does anybody know how
to use parametric or nonparametric statistics to conduct P&L analysis to
exam the significant difference between test and control?
Thanks |
|
u*****o
发帖数: 1224 | 44 11点的面试，10.30我就开始坐立不安，心也砰砰跳，我跟自己说不要紧张
跑去听龚琳娜的小河淌水，人家也在等待，比我幸福多了，人家等阿哥回来，我在等被
虐啊！！
混了半个小时过去，电话按时响起。。
下面是面经
1.research experience （讲了15分钟）
2.一堆data, Bernoulli distribution, 40% = 1, 60% = 0, design test to see if
40% is significantly less than expected?
我说用chi-square, 因为是non-parametric, expected frequency = 0.5, 他又问chi-
square的公式。
3. 另一堆data, 70% = 0， design a test to see if the two samples （和前面一
道题的60%） are different, 我说用two sample t test, 这个对不？
4. 3 columns of data, two continuous variable, one b... 阅读全帖 |
|
u*****o
发帖数: 1224 | 45 11点的面试，10.30我就开始坐立不安，心也砰砰跳，我跟自己说不要紧张
跑去听龚琳娜的小河淌水，人家也在等待，比我幸福多了，人家等阿哥回来，我在等被
虐啊！！
混了半个小时过去，电话按时响起。。
下面是面经
1.research experience （讲了15分钟）
2.一堆data, Bernoulli distribution, 40% = 1, 60% = 0, design test to see if
40% is significantly less than expected?
我说用chi-square, 因为是non-parametric, expected frequency = 0.5, 他又问chi-
square的公式。
3. 另一堆data, 70% = 0， design a test to see if the two samples （和前面一
道题的60%） are different, 我说用two sample t test, 这个对不？
4. 3 columns of data, two continuous variable, one b... 阅读全帖 |
|
s******u
发帖数: 21 | 46 你试下 method of moment 吧， 看看 shape 和scale 和 mean ,variance 有没有啥
关系，然后反解 得到shaple 和 scale~~ 如果能做到这一步的话，可以再用
parametric bootstrap (用估计得到 shape 和 scale当成真实的) 得到 估计值的方差
). |
|
A*******s
发帖数: 3942 | 47 比较单变量的AUC等价于wilcoxon test，算nonparametric方法, 看的是ranking
ability
你说的P value应该是wald test吧，算parametric方法，看的是有多符合线性假设。
dependent |
|
d****u
发帖数: 1373 | 48 各自优缺点，请教一下，哪位大虾能给个概括的总结？或者给个链接什么的？我google
出来的都不太满意。
谢谢了先！ |
|
h***i
发帖数: 3844 | 49 you mean testing or estimation?
google |
|
d****u
发帖数: 1373 | 50
estimation
我们非统计专业，同时用nonp和p做了model，现在要sr mgt来决定用哪个，所以需要给
他们个大概介绍 |
|
