l***o 发帖数: 5337 | 1 【 以下文字转载自 Stock 讨论区 】
发信人: letgo (过不沾衣), 信区: Stock
标 题: 怎么查individual stock和指数的correlation?
发信站: BBS 未名空间站 (Wed Feb 13 23:07:41 2013, 美东)
自己算倒是容易,但我记得原来用一个R package (quantmod?)下载过所有sp500个股的
数据,但现在查只能一个一个股票地下载了。莫非我记错了?
有什么网站or工具可以直接查看吗? |
|
m*******1 发帖数: 855 | 2 mental hanzel correlation? |
|
w*******9 发帖数: 1433 | 3 Agree with cathyan. statistical significance != practical significance. You
need to set a cut off value to define "strong correlation". |
|
t*******0 发帖数: 64 | 4 CCA is canonical correlation analysis吗? 有什么书或者是参考资料介绍这些方法
的?谢谢! |
|
P****D 发帖数: 11146 | 5 一个仪器出三百个数据,你要临床医生如何应用?!医生光看结果就看傻了!如何做出
诊断?
你这个应该是一个很大的项目,没有背景知识,我是说不出什么。看sample size,也
许是个stage 2?如果你对这个仪器的研究是在刚刚开始的阶段,那么一个一个做
correlation,这个步骤难以避免。这样做
下来,自然会有很多false positive,然后再进一步筛选。 |
|
l****s 发帖数: 6 | 6 (1) yes,CCA = canonical correlation analysis
(2)James Lattin/J. Douglas Carroll/Paul E. Green Analyzing Multivariate Data
是很好的书 |
|
g****n 发帖数: 47 | 7 如果a对b的结果是0.8,a对c的结果是0.9,那能说a对c比对b更依赖么?correlation的
数值有比较性么? |
|
p*******i 发帖数: 1181 | 8 ”a对c比对b更依赖“这个说法是有问题的,Correlation不能说明任何因果关系,就你
的例子而言,完全有可能是a决定b和c的值,而不是a”依赖“于b和c。 |
|
g****l 发帖数: 213 | 9 correlation的数字有比较性吧,可以说a跟c更有关联,楼上说的对,相关性跟因果是
两码事 |
|
i****f 发帖数: 979 | 10 response是工资,x是年份,想做y vs x的regression,老板说x是year,可以把random
error做成correlated 的 covariate 的 matrix。这个matrix是time的一个function
。想请教一下用r该怎么做 |
|
h******y 发帖数: 3501 | 11 PEARSON CORRELATION和LINEAR REGRESSION结果是一样的。
way
用 |
|
g******7 发帖数: 1433 | 12 linear reg可以看correlation matrix
如果是logistics 想看outcome var和 单一predictor的关系,有哪些 sas command能
实现? |
|
c********h 发帖数: 330 | 13 vif是看covariates之间的关系的
如果关心y和单个x的关系,可以画boxplot,也可以分别画出x中属于class1的obs,和x
属于class2的obs,看是不是线性关系,比如属于class1的x值大多数都小于属于class2
的x值
correlation也不会一点用都没有,想麻烦点的话可以用permutation test
可以做univariate logistic regression,看是不是显著等等
现成的command不是很清楚 |
|
w**********y 发帖数: 1691 | 14 Standard way:
correlation based on weekly returns (St/Ss - 1) in 6 months or 1 year
More professional way:
Factor Model. e.g. Barra Model
baozi pls. |
|
c********h 发帖数: 330 | 15 clustering没有局限于one-dim啊,这个可以用各种clustering的method, kmeans,
mixture EM都可以是multi-dim
如果你想用correlation as a distance,你可以用hierarchical clustering,这个可
以自己specify distance.
每一种clustering也都可以specify number of clusterings |
|
h***x 发帖数: 586 | 16 1) As catforfish said, the data point is not necessary to be a scalar, a
vector is fine. All my work on clustering are for multi dimension instead of
one dimension. I suggest you spending some time to learn clustering first.
2)In your example, v1 and v2 has strong correlation. If you want to take
this into account in clustering, you should not use euclidean distance as
the statistical measure, you can use other measures with the features you
like for your task.
3)For clustering, result explanati... 阅读全帖 |
|
c***z 发帖数: 6348 | 17 You can use correlation, or inner product, or cosine distance, or Hamming
distance, or anything you wish for distance between vectors
numbers. |
|
g******2 发帖数: 234 | 18 linear correlation is scale invariant, so you don't have to worry about
scale. |
|
a*****i 发帖数: 1045 | 19 怎么通过canonical correlation的方法计算multiple regression呢。
老师给了三组数据:
x1: 1 2 4 6 8
x2: 1 6 0 7 2
y: 1 5 4 6 7
要求用手算,如果有大侠知道的,先谢了。 |
|
T*******I 发帖数: 5138 | 20 Did he/she do it with Jack-knife or bootstrap process? I am not sure, so I
simply suppose he/she did in that simple way.
To me, correlation coefficient is a continuous random variable. So, t-test
is proper for this case.
The terminology of "sample" in Statistics sometime may cause confusion when
it is used by different people under different situations. |
|
T*******I 发帖数: 5138 | 21 Simply, t-test is practicable since the correlation coefficient is a
continuous random variable, and the sample size of the two samples are 45
and 28, respectively.
If the t-test cannot be used for this case, let it die in Statistics! |
|
g******2 发帖数: 234 | 22 If I understand correctly, each sample is some kind of measurements on
different coordinates, otherwise it's hard to image such big correlation on
independent samples. I would suggest that
1. calculate the variance (using 8 or 10 samples depending on the population
) on each coordinate
2. sum up the variances across coordinates, let's call it SS
3. run a F-test (SS1 / k1 / (SS2 / k2)) with df1 = 9 * k1, df2 = 7* k2,
where k1 is the number of coordinates for population 1 and k2 is the number
of c... 阅读全帖 |
|
t**********y 发帖数: 374 | 23 计算的是pearson correlation
terms |
|
t**********y 发帖数: 374 | 24 由于是所以组合的correlation,所以的确是不独立 |
|
T*******I 发帖数: 5138 | 25 Usually 数据结构是这样的:
ID JY1 JY2 .....JY10000
女1
女2
.
.
.
女10
男1
男2
.
.
.
男8
and the correlation coefficient can be calculated among 基因s for 女 or 男,
respectively.
But, 他的数据结构是这样的:
基因 女1 女2 .... 女10 男1 男2 ... 男8
JY1
JY2
.
.
.
JY1万
他计算的是每一性别内每两个人形成的组合中一万个基因的变异性之间的相关性。由于
基因数据的产生和记录方式对每一个基因都是一样的, 例如, 都是某种表达率, 他所定
义的相关系数作为一种随机测量是没有问题的, 且不会有重复的组合发生, 从而每一个
组合也即每一个相关系数都是独立的。 |
|
t**********y 发帖数: 374 | 26 The data were from RNAseq. The numbers are the gene counts (each gene has
one specific count in a specific sample)
I feel that correlation coefficient seem to be acceptable in term of
evaluating sample reproducibilities even though we all know the pitfalls.
I am interested in what you mentioned: euclidean distance. Could you please
know how to test those distances? Or any paper for recommendation?
Thanks a lot.
assay
are
research
those |
|
d*********d 发帖数: 239 | 27 做simulation,有好几个predictors.其中发现x2 and x4是highly correlated. 我们
一般怎么做呢? |
|
f****1 发帖数: 289 | 28 也就是没有multi-colinearity的问题,multiple regression或者model selection的
时候就只有其中2个显著,其余变量都out了。既然他们不correlate, 难道不是每一个
都能解释一部分的variation才make sense 吗?
这是不是说明这个2个变量比其他变量能explain greater percentage of variation
of the response variable, 但是并不一定有cause and effect的关系呢? |
|
Z********6 发帖数: 10 | 29 you know the relationship between Z and X, what is the point to see the
correlation? |
|
e***o 发帖数: 344 | 30 是correlation还是cause,不好证明。不过有paper说,人或动物瞎了后,视觉脑区会
被用来作其他的。 听觉??? |
|
a****g 发帖数: 8131 | 31 I entered bac and got
Symbol Correlation Plot
FMBI 0.91
XOMA 0.91
TCB 0.90
AMRB 0.89
BQI 0.89
BXS 0.89
FHN 0.89
BOCH 0.88
FUBC 0.88
PST 0.88
the detailed pattern is not as good as c
different algorithm? |
|
|
b***i 发帖数: 10018 | 33 貌似这位美女也是有目的的...
http://www.vegsource.
com/news/2010/07/china-study-author-colin-campbell-slaps-down-critic-den
ise-minger.html
Reply to Denise Minger
by Dr. T. Colin Campbell, PhD, author The China Study
Ms. Denise Minger has published a critique of our book, The China Study,
as follows.
The China Study: Fact or Fallacy? by Denise Minger - article found at:
http://bit.ly/9s5pn8
It is both interesting and gratifying that there has been such a huge
response, both on her blog and on those of others... 阅读全帖 |
|
b***y 发帖数: 14281 | 34 既然有人争论方的学术水平,就上网搜了一下。应该说这个水平对于一个junior
faculty来说可以算是很牛B了,但是对于老方这种senior的已经搞了一辈子的人来说,
就只能算so so。不要说是院士,离aps fellow的级别也还差了不少。引用率最高的一
篇文章还是95年到了arizona之后跟老外合作的,被引118次,这也是方唯一一篇被引用
上百次的文章。可见方励之89之前确实没有做出过什么重要的工作,他的名声和地位绝
对是靠政治得来的,当然其中部分的也是80年在中国搞科普所得,必须承认科普工作也是
有重要的社会意义的。
(BTW,有人说你这个搜索未必完整。不错,确实不能保证100%毫无遗漏。但是我
用的search engine is THE search engine everybody in this community uses today.
So, if any article is not found by this search engine, sadly, it simply doesn't matter,
because no one would ever n... 阅读全帖 |
|
q******r 发帖数: 6542 | 35 ☆─────────────────────────────────────☆
handsomex (潇潇细雨) 于 (Thu Mar 24 23:05:47 2011, 美东) 提到:
有什么好的度量吗?
☆─────────────────────────────────────☆
benbenma (猪猪) 于 (Thu Mar 24 23:34:13 2011, 美东) 提到:
regression?就是那个啥r2的东东?
☆─────────────────────────────────────☆
handsomex (潇潇细雨) 于 (Thu Mar 24 23:40:23 2011, 美东) 提到:
这是什么啊?
☆─────────────────────────────────────☆
benbenma (猪猪) 于 (Thu Mar 24 23:42:47 2011, 美东) 提到:
统计分析啊?
☆─────────────────────────────────────☆
handsomex (潇潇细雨) 于 ... 阅读全帖 |
|
S*********g 发帖数: 24893 | 36 http://www.prisoners.com/relcrime.html
宗教对犯罪率的影响
更加信仰基督的地方有更多的社会弊病和犯罪。这是格雷戈里。保罗在学术杂志《宗教
与社会》上发表的初步结论,这个杂志是内布拉斯加州一所教会学校的学报。
http://moses.creighton.edu/JRS/2005/2005-11.html
研究表明,基督教统治的美国南部和中西部地区,社会弊端和犯罪更严重,谋杀,性病
,死亡率更高。这项研究还表明,美国的犯罪率和基督徒比例,比其他发达世界国家都
高得多。
无法回避的现实是,基督教的教条更合适一个病态的社会。宗教狂热分子和极端主义比
毒品危害更大。
理性的人认识到基督教神话的荒谬可怜,而基督徒,尤其是福音派,或原教旨主义者,
不过是一些伪君子,用宗教作为武器来贬低他人。
格雷戈里。保罗的研究首次量化了基督教教义产生的社会效果。不只是基督教,一切狂
热的邪教都可能会有类似的邪恶效果。
当然,天主教会花了几百年压迫陷入贫困和苦难的老百姓。穆斯林有同样的呼吁
:暴力,复仇,排斥和压迫。
理智的人会奇怪宗教神话的诞生。
在美国,宗教=残酷。
Cr... 阅读全帖 |
|
S*********g 发帖数: 24893 | 37 http://www.prisoners.com/relcrime.html
宗教对犯罪率的影响
更加信仰基督的地方有更多的社会弊病和犯罪。这是格雷戈里。保罗在学术杂志《宗教
与社会》上发表的初步结论,这个杂志是内布拉斯加州一所教会学校的学报。
http://moses.creighton.edu/JRS/2005/2005-11.html
研究表明,基督教统治的美国南部和中西部地区,社会弊端和犯罪更严重,谋杀,性病
,死亡率更高。这项研究还表明,美国的犯罪率和基督徒比例,比其他发达世界国家都
高得多。
无法回避的现实是,基督教的教条更合适一个病态的社会。宗教狂热分子和极端主义比
毒品危害更大。
理性的人认识到基督教神话的荒谬可怜,而基督徒,尤其是福音派,或原教旨主义者,
不过是一些伪君子,用宗教作为武器来贬低他人。
格雷戈里。保罗的研究首次量化了基督教教义产生的社会效果。不只是基督教,一切狂
热的邪教都可能会有类似的邪恶效果。
当然,天主教会花了几百年压迫陷入贫困和苦难的老百姓。穆斯林有同样的呼吁
:暴力,复仇,排斥和压迫。
理智的人会奇怪宗教神话的诞生。
在美国,宗教=残酷。
Cr... 阅读全帖 |
|
S*********g 发帖数: 24893 | 38 http://www.prisoners.com/relcrime.html
宗教对犯罪率的影响
更加信仰基督的地方有更多的社会弊病和犯罪。这是格雷戈里。保罗在学术杂志《宗教
与社会》上发表的初步结论,这个杂志是内布拉斯加州一所教会学校的学报。
http://moses.creighton.edu/JRS/2005/2005-11.html
研究表明,基督教统治的美国南部和中西部地区,社会弊端和犯罪更严重,谋杀,性病
,死亡率更高。这项研究还表明,美国的犯罪率和基督徒比例,比其他发达世界国家都
高得多。
无法回避的现实是,基督教的教条更合适一个病态的社会。宗教狂热分子和极端主义比
毒品危害更大。
理性的人认识到基督教神话的荒谬可怜,而基督徒,尤其是福音派,或原教旨主义者,
不过是一些伪君子,用宗教作为武器来贬低他人。
格雷戈里。保罗的研究首次量化了基督教教义产生的社会效果。不只是基督教,一切狂
热的邪教都可能会有类似的邪恶效果。
当然,天主教会花了几百年压迫陷入贫困和苦难的老百姓。穆斯林有同样的呼吁
:暴力,复仇,排斥和压迫。
理智的人会奇怪宗教神话的诞生。
在美国,宗教=残酷。
Cr... 阅读全帖 |
|
S*********g 发帖数: 24893 | 39 http://www.prisoners.com/relcrime.html
宗教对犯罪率的影响
更加信仰基督的地方有更多的社会弊病和犯罪。这是格雷戈里。保罗在学术杂志《宗教
与社会》上发表的初步结论,这个杂志是内布拉斯加州一所教会学校的学报。
http://moses.creighton.edu/JRS/2005/2005-11.html
研究表明,基督教统治的美国南部和中西部地区,社会弊端和犯罪更严重,谋杀,性病
,死亡率更高。这项研究还表明,美国的犯罪率和基督徒比例,比其他发达世界国家都
高得多。
无法回避的现实是,基督教的教条更合适一个病态的社会。宗教狂热分子和极端主义比
毒品危害更大。
理性的人认识到基督教神话的荒谬可怜,而基督徒,尤其是福音派,或原教旨主义者,
不过是一些伪君子,用宗教作为武器来贬低他人。
格雷戈里。保罗的研究首次量化了基督教教义产生的社会效果。不只是基督教,一切狂
热的邪教都可能会有类似的邪恶效果。
当然,天主教会花了几百年压迫陷入贫困和苦难的老百姓。穆斯林有同样的呼吁
:暴力,复仇,排斥和压迫。
理智的人会奇怪宗教神话的诞生。
在美国,宗教=残酷。
Cr... 阅读全帖 |
|
h******i 发帖数: 661 | 40 你们学校ap能发这么多paper?
1989
Cosmological implications of quasar-galaxy associations, L.Z.Fang, Y.Q.Chu
and X.F. Zhu, Mod. Phys. Lett., 4, 887.
Geometrical optics in an inhomogeneous universe, L.Z.Fang and X.P.Wu,
Chinese Phys. Lett., 6, 233.
Quasar clustering and its cosmological implication, L.Z.Fang, Inter. J. Mod.
Phys. A4, 3477.
L'Osservatorio astronomico di Pechino: la sua storia, il presente, L.Z.Fang,
Scienza e Tecnica, Annuario della EST 88/89 404.
Overview on the frontier of high energy astr... 阅读全帖 |
|
S******8 发帖数: 24594 | 41 老方到美国后发的文章列表,你自己看吧:
1990
174. Biased clustering in a universe with hot dark matter and a cosmic
string, L.Z.Fang, S.P.Xiang and L.Yan, Astr. & Astrophys. 233, 1.
175. Periodicity of redshift distribution in a T-3 universe, L.Z.Fang, Astr.
& Astrophys. 239, 24.
176. An upper limit to quasar's peculiar velocity, L.Z.Fang, Y.Q.Chu, X.F.
Zhu and L.F. Wang, Inter. J. Mod. Phys., 5, 2993.
177. Quasar pair and quasar's peculiar velocity, L.Z.Fang, Developments in
general relativity, astrophysics and qu... 阅读全帖 |
|
b***y 发帖数: 14281 | 42 No. The search include his early works up to 1978. Here is the same list
sorted by year.
1) The Influence of Gravitation on the Vacuum State.
By Li-Zhi Fang.
Acta Phys. Sinica 27 ( 1978) 181-18.
2) THE STRUCTURE AND STABILITY OF THE ABNORMAL NEUTRON STAR.
By Li-Zhi Fang, Qin-Yue Qu, Zhen-Ru Wang, Tan Lu, Liao-Fu Luo.
Sci.Sin.22:187-198,1979.
3) Some Recent Developments in Astrophysics. (Talk).
By Li-Zhi Fang, A. Qadir, R. Ruffini.
In *Nathiagali 1980, Proceedings, Physics and Contemporary Needs... 阅读全帖 |
|
p********a 发帖数: 5352 | 43 ☆─────────────────────────────────────☆
zhongdianshi (brb) 于 (Mon Aug 29 09:50:26 2011, 美东) 提到:
OUTCOME: BMI
PREDICTOR: QUESTION1, QUESTION2, QUESTION5, QUESTION6...
所有的PREDICTORS是ORDIANL VARIABLE.
我想分别TEST OUTCOME和每一个PREDICTOR的CORRELATION.
我用了2个方法:
1.
PROC CORR SPEARMAN;
VAR BMI QUESTION1n QUESTION2n...;
RUN;
生成一个CORRELATION TABLE.
2. ANOVA
分别把每个PREDICTOR和BMI放到MODEL里,这一步,我不是很确定.
proc glm data = DATA;
class QUESTION1;
model BMI = QUESTION1;
meansQUESTION1;
run;
quit;
最终,是要建个MIXED MOD... 阅读全帖 |
|
s*****0 发帖数: 357 | 44 临周末前说说correlation和regression吧. 很多教科书上都把这两个techniques放在
一起讨论,初学统计的人难免会觉得两者密不可分。其实两者的区别还是很明显的,服
从于不同的分析目的,很少有人对数据同时使用这两种方法。
先说说correlation。Correlation是用来检测两组continous的数据间有没有
association(另一种方法前文已提到,回顾一下)。比如年龄和脂肪含量,胳膊长和
腿长,它们之间有相关性,但没有明确的causality关系。难道说年龄是导致脂肪含量
增高的根本原因?我看缺乏锻炼吃得太多才更是原因。
测量相关性用的一个系数叫做correlation coefficient。标准的计算方法经常归功于
Pearson,所以很常见Pearson's r的提法。其范围介于-1到1间。正值为正相关,负值
为负相关,而接近于0的话则相关性不显著。通常将两组数据用scatter plot画出来能
看出端倪, 数据间的分布可能有一个underlying linear trend,而Pearson's r就是
一个测量scattered的数据... 阅读全帖 |
|
z****i 发帖数: 406 | 45 转自wilmott
mghiggins
Senior Member
Posts: 313
Joined: Nov 2001
Sat Jan 04, 03 01:54 PM
User is offline
Qualitative explanation for why there is a vol smile in stochastic
volatility models from a market-making perspective:
First, let's step back and look at the standard Black-Scholes world. Why do
options have value over intrinsic value? Because they have positive Gamma.
As a market-making trader, you buy an option and Delta-hedge it - now, the
value of your portfolio as a function of the ... 阅读全帖 |
|
a*****i 发帖数: 1045 | 46 第一年,完全没什么概念呢。已经开始选择论文题目了。现在有几个option,不知道有
没有好心人可以帮忙看看哪些方向比较好,或者对将来工作会有帮助。
自己之前定了跟statistical process control 有关的方向。但不怎么样。
1. Title : A comparison of different statistical process monitoring schemes
on real life data (这个是关于statistical process control的)
It is often desirable to provide online monitoring for industrial or
agricultural processes. Faced with the task of performing such monitoring,
practitioner will often choose to apply a control chart. However, there many
options available, and it i... 阅读全帖 |
|
c******n 发帖数: 5697 | 47 Is stock picking a dead art?
It has looked that way in recent weeks, as macro issues such as the solvency
of European countries and fears of a global economic slowdown have
overshadowed fundamental differences between companies. The consequence is
that stocks are moving in tandem, indicating a high degree of correlation.
Based on one-month trailing movements, S&P 500-index stocks have a
correlation of 80%, even higher than the 73% peak reached during the crisis
in late 2008, says Ana Avramovic o... 阅读全帖 |
|
l******g 发帖数: 81 | 48 Old And No News Is Good News Apparently?
Tyler Durden's picture
Submitted by Tyler Durden on 10/26/2011 17:16 -0400
Copper
Futures market
recovery
While S&P futures managed to make higher highs in the last hour, the EUR did
not as only TSYs managed to follow stocks to those extreme levels. It was
an odd day, as we have noted many times today, as the total lack of news
combined with rallies on the back of old news seemed enough to juice stocks
higher. It does make one think a little a... 阅读全帖 |
|
j*******7 发帖数: 6300 | 49 Is Logic an Absolute?
by
Roger Smalling, D.Min
There exists a small category of realities termed primordial. These require
no proof of existence beyond themselves. Time and space are good examples.
Empty space would exist even if nothing else did. We need not try to prove
or explain them. They just are.
Time is another example of a primordial reality. If we define time as the
relative rate of change between material objects, then it follows that time
could not exist without matter. Or, that the ... 阅读全帖 |
|
T**********y 发帖数: 157 | 50 http://www.ccse.uestc.edu.cn/teacher/teacher.aspx?id=414
所有已经发表论文清单
(发表时间序)
【1】 周涛,傅忠谦,周佩玲,张建荣,张德学,”基于遗传算法的大规模流量
工程问题求解”,计算机应用,2003年第6期,43-45
【2】 杨春霞,周涛,周佩玲,刘隽,基于Multi_Agent的股市经济系统建模与
分析,自动化理论、技术与应用卷十,中国科学技术大学出版社,2003年,596-601(
中国自动化学会第18届青年学术年会会议论文集)
【3】 周佩玲,许民,赵亮,周涛,”混沌信号奇异性检测与外界冲击度量”,
数据采集与处理,Vol.19,195-198,2004
【4】 周涛,徐俊明,刘隽,”图直径和平均距离极值问题研究”,中国科学技
术大学学报,Vol.34,410-413,2004
【5】 周佩玲,杨春霞,周涛,李立文,”虚拟股市建模与混沌分析”,中国科
学技术大学学报,Vol.34,442-448,2004
【6】 T. Zhou, P. ... 阅读全帖 |
|