统计应用

COS每周精选:随机试验处处坑

潘岚锋 / 2013-02-17

By 陈丽云自从Fisher大神种地种出心得来，搞出了随机对照试验，这样的简单有效方法就如春风一般席卷了五湖四海。很多时候，你不整出来个控制的分毫不差的随机试验，再好的契合直觉的结果也没人相信。人们对于因果关系的定义，好像一瞬间都集中在了统计分析的一致性上…显著吗？亲，几个星号？^[注：Fisher的炫目人生和随机试验的来龙去脉，请参见书籍《女士品茶》(《The Lady Tasting……

职业事业

应聘准备：非统计和计算机背景的学生如何找到SAS程序员的工作？

高燕 / 2013-02-16

在LinkedIn上看到一个帖子问“金融和会计背景且有SAS知识的学生是否很难找到SAS程序员的工作？”，第一位回复的是SAS公司资的深培训师 Cynthia Zender，回复内容非常专业具体，值得一看。 Cynthia Zender 说每当她的学生提出类似问题时，她的答复是：上招聘网站 Monster.com 或者 Icrunchdata.com 看看即将投身的领域在所在地区都需要什么样……

统计软件

R与SAS的集成

高燕 / 2013-02-16

一位优秀的分析师不仅要有深厚的理论功底、丰富的实战经验，还要熟悉几款常用的分析软件，并有一款自己精通的软件。就像武林高手既有独门秘器，又要熟悉各门各派，这样才能博采众长，兼收并蓄，为己所用。竞争促进创新，合作带来双赢。R与SAS各有优势，也各有问题，国内外网上骂战得多，思考如何将两者集成并能拿出可行方案的人则少之又少，即便有也基本都是老外或者外籍华人想出来的。这里不想贬低国人，只想建议大家多一些……

新闻动态

COS每周精选:让祸害人间的显著性星号消失吧！

潘岚锋 / 2013-02-11

本期材料由谢益辉、肖楠整理提供。统计之都将会定期为大家精选若干有猛料和干货的海外统计日志、文章、项目。如果大家读到好的统计博客，可以向我们推荐(editor@cos.name)。如果有人愿意把或已经把这些博客翻译成中文，请与我们联系(editor@cos.name)。我们将会收录在主站的博客翻译模块，供更多读者阅读。 […] 著名的标题党Larry Wasserman（卡耐基梅隆统……

机器学习

十八般武艺，谁主天下？

陈丽云 / 2013-02-05

十八般武艺各有神通之处，所谓“一弓、二弩、三枪、四刀、五剑、六矛、七盾、八斧、九钺、十戟、十一鞭、十二锏、十三挝、十四殳、十五叉、十六耙、十七绵绳套索、十八白打”，这让一个江湖新手一上来就学全十八般武艺，还真是有点为难人家呢。这在古代，天下可都是一群架一群架扎扎实实打出来的。指挥者可以运筹帷幄决胜于千里之外，但是真要上阵的小兵们可就惨多了——谁若是稍有走神，怕是小命就危在旦夕了。还有那血雨腥风却始……

新闻动态

COS每周精选：Hilary，你的名字弱爆了！

潘岚锋 / 2013-02-03

从本周起，统计之都将会定期为大家精选若干有猛料和干货的海外统计日志、文章、项目。如果大家读到好的统计博客，可以向我们推荐(editor@cos.name)。如果有人愿意把或已经把这些博客翻译成中文，请与我们联系(editor@cos.name)。我们将会收录在主站的博客翻译模块，供更多读者阅读。 * Hilary，你的名字弱爆了！一位叫Hilary的研究生分析了近百年来比较受欢迎的美国人名，发现……

统计模型

正态分布的前世今生(下)

靳志辉 / 2013-01-28

19世纪初，随着拉普拉斯中心极限定理的建立与高斯正态误差理论的问世，正态分布开始崭露头角，逐步在近代概率论和数理统计学中大放异彩。在概率论中，由于拉普拉斯的推动，中心极限定理发展成为现代概率论的一块基石。而在数理统计学中，在高斯的大力提倡之下，正态分布开始逐步畅行于天下。 […] 先来说说正态分布在概率论中的地位，这个主要是由于中心极限定理的影响。1776年，拉普拉斯开始考虑一个天文……

统计模型

正态分布的前世今生(上)

靳志辉 / 2013-01-28

神说，要有正态分布，就有了正态分布。 […] 神看正态分布是好的，就让随机误差服从了正态分布。 […] — 创世纪—数理统计 […] 学过基础统计学的同学大都对正态分布非常熟悉。这个钟形的分布曲线不但形状优雅，它对应的密度函数写成数学表达式 $$ \displaystyle……

新闻动态

COS数据分析沙龙第八期（上海，@联合创业办公社）

陈丽云 / 2013-01-21

冬日的阴霾还没有完全散去，而温度却也在悄然的回升。周末的下午，相聚在极富小资情调的沙龙，也不失为一种打磨时光的优雅方式嘛。（感谢联合创业办公社）兴致所至，偶得意的笑~ 沙龙例行的，大家会简单的介绍一下自己。出乎组织者意料，陆陆续续的居然来了三十多位朋友，瞬间小小的会议室显得高朋满座，讨论气息愈加浓烈。据我们的不完全统计，参加者来自金融，制药，市场咨询，IT，电商，学术研究等领域，可谓跨界一锅端，……

统计计算

LDA-math-MCMC 和 Gibbs Sampling

靳志辉 / 2013-01-17

随机模拟(或者统计模拟)方法有一个很酷的别名是蒙特卡罗方法(Monte Carlo Simulation)。这个方法的发展始于20世纪40年代，和原子弹制造的曼哈顿计划密切相关，当时的几个大牛，包括乌拉姆、冯.诺依曼、费米、费曼、Nicholas Metropolis，在美国洛斯阿拉莫斯国家实验室研究裂变物质的中子连锁反应的时候，开始使用统计模拟的方法,并在最早的计算机上进行编程实现。随机模拟……

统计模型

LDA-math-认识Beta/Dirichlet分布

靳志辉 / 2013-01-14

统计学就是猜测上帝的游戏,当然我们不总是有机会猜测上帝，运气不好的时候就得揣度魔鬼的心思。有一天你被魔鬼撒旦抓走了，撒旦说：“你们人类很聪明，而我是很仁慈的，和你玩一个游戏，赢了就可以走，否则把灵魂出卖给我。游戏的规则很简单，我有一个魔盒，上面有一个按钮，你每按一下按钮，就均匀的输出一个[0,1]之间的随机数，我现在按10下，我手上有10个数，你猜第7大的数是什么，偏离不超过0.01就算对。”你应……

统计模型

LDA-math-神奇的Gamma函数

靳志辉 / 2013-01-13

学高等数学的时候，我们都学习过如下一个长相有点奇特的Gamma函数 $$ \Gamma(x)=\int_0^{\infty}t^{x-1}e^{-t}dt $$ 通过分部积分的方法，可以推导出这个函数有如下的递归性质 $$\Gamma(x+1) = x \Gamma(x)$$ 于是很容易证明，\(\Gamma(x)\)函数可以当成是阶乘在实数集上的延拓，具有如下性质 $$\Gamma(n) =……