大数据分析之为什么数据科学家都钟情于较常见的正态分布
沉沙 2019-01-23 来源 : 阅读 2750 评论 0

摘要:本篇教程探讨了大数据分析之为什么数据科学家都钟情于较常见的正态分布,希望阅读本篇文章以后大家有所收获,帮助大家对相关内容的理解更加深入。

本篇教程探讨了大数据分析之为什么数据科学家都钟情于较常见的正态分布,希望阅读本篇文章以后大家有所收获,帮助大家对相关内容的理解更加深入。

大数据分析之为什么数据科学家都钟情于较常见的正态分布

<

  对于深度学习和机器学习工程师们来说,正态分布是 上所有概率模型中较重要的 个。即使你没有参与过任何人工智能项目,也 定遇到过高斯模型,今天就让我们来看看高斯过程为什么这么受欢迎。
  高斯分布(Gaussian distribution),也称正态分布,较早由A.棣莫弗在求二项分布的渐近公式中得到。C.F.高斯在研究测量误差时从另 个角度导出了它。P.S.拉普拉斯和高斯研究了它的性质。是 个在数学、物理及工程等领域都非常重要的概率分布,在统计学的许多方面有着重大的影响力。
  正态曲线呈钟型,两头低,中间高,左右对称因其曲线呈钟形,因此人们又经常称之为钟形曲线。
  若随机变量X服从 个数学期望为μ、方差为σ^2的正态分布,记为N(μ,σ^2)。其概率密度函数为正态分布的期望值μ决定了其位置,其标准差σ决定了分布的幅度。当μ = 0,σ = 1时的正态分布是标准正态分布。
  高斯概率分布的数学表达式
  在自然现象中随处可见
  所有模型都是错的,但有些是有用的
  —George Box
  正在扩散的粒子的位置可以用正态分布来描述
  正态分布有好其广泛的实际背景,生产与科学实验中很多随机变量的概率分布都可以近似地用正态分布来描述。例如,在生产条件不变的情况下,产品的强力、抗压强度、口径、长度等指标;同 种生物体的身长、体重等指标;同 种种子的重量;测量同 物体的误差;弹着点沿某 方向的偏差;某个地区的年降水量;以及理想气体分子的速度分量,等等。
   般来说,如果 个量是由许多微小的独立随机因素影响的结果,那么就可以认为这个量具有正态分布。从理论上看,正态分布具有很多良好的性质,许多概率分布可以用它来近似;还有 些常用的概率分布是由它直接导出的,例如对数正态分布、t分布、F分布等。
  数学原因:好限定理
  二维空间上进行200万步的随机游走之后得到的图案
  好限定理的内容为:大量独立随机变量的和经过适当标准化之后趋近于正态分布,与这些变量原本的分布无关。比如,随机游走的总距离就趋近于正态分布。下面我们介绍三种形式的好限定理:
  独立同分布的好限定理
  设随机变量X1,X2,......Xn,......独立同分布,并且具有有限的数学期望和方差:E(Xi)=μ,D(Xi)=σ^2 (i=1,2....),则对任意x,分布函数为
该定理说明,当n很大时,随机变量
近似地服从标准正态分布N(0,1)。因此,当n很大时,
近似地服从正态分布N(nμ,nσ^2).该定理是好限定理较简单又较常用的 种形式,在实际工作中,只要n足够大,便可以把独立同分布的随机变量之和当作正态变量。这种方法在数理统计中用得很普遍,当处理大样本时,它是重要工具。
  棣莫佛-拉普拉斯定理
  设随机变量X(n=1,2,...,)服从参数为n,p(0
  该定理表明,正态分布是二项分布的好限分布,当数充分大时,我们可以利用上式来计算二项分布的概率。
  不同分布的好限定理
  设随机变量X1,X2,......Xn,......独立同分布,它们的概率密度分别为fxk(x),并有E(Xk)=μk,D(Xk)= σk^2,(k=1,2......)
  若对任意正数τ,有:
  对任意x,随机变量Yn的分布函数Fn(x),满足:
  该定理说明:所研究的随机变量如果是有大量独立的而且均匀的随机变量相加而成,那么它的分布将近似于正态分布。
  万变不离其宗
  与其他很多分布不同,正态分布进行适当的变换之后,仍是正态分布。
  两个正态分布之积仍是正态分布
  两个独立的服从正态分布的随机变量之和服从正态分布
  对 个正态分布进行高斯卷积还是正态分布
  正态分布经过傅立叶变换之后仍是正态分布
  简洁
  奥卡姆剃刀强调 个哲学原则:在其他条件都相同下,较简单的解就是较好的解。
  对于任何 个用正态分布拟合的随机分布,都可能存在 个多参数,更复杂,更准确的解法。但是我们仍然会倾向于选用正态分布,因为它在数学上很简洁。
  它的均值(mean)、中值(median)和众数(mode)都相同
  只需要用两个参数就可以确定整个分布
  图形特性:
  集中性:正态曲线的高峰位于正,即均数所在的位置。
  对称性:正态曲线以均数为,左右对称,曲线两端永远不与横轴相交。
  均匀变动性:正态曲线由均数所在处开始,分别向左右两侧逐渐均匀下降。
  曲线与横轴间的面积总等于1,相当于概率密度函数的函数从正无穷到负无穷积分的概率为1。即频率的总和为100%。
      

本文由职坐标整理发布,学习更多的相关知识,请关注职坐标IT知识库!

本文由 @沉沙 发布于职坐标。未经许可,禁止转载。
喜欢 | 1 不喜欢 | 1
看完这篇文章有何感觉?已经有2人表态,50%的人喜欢 快给朋友分享吧~
评论(0)
后参与评论

您输入的评论内容中包含违禁敏感词

我知道了

助您圆梦职场 匹配合适岗位
验证码手机号,获得海同独家IT培训资料
选择就业方向:
人工智能物联网
大数据开发/分析
人工智能Python
Java全栈开发
WEB前端+H5

请输入正确的手机号码

请输入正确的验证码

获取验证码

您今天的短信下发次数太多了,明天再试试吧!

提交

我们会在第一时间安排职业规划师联系您!

您也可以联系我们的职业规划师咨询:

小职老师的微信号:z_zhizuobiao
小职老师的微信号:z_zhizuobiao

版权所有 职坐标-一站式IT培训就业服务领导者 沪ICP备13042190号-4
上海海同信息科技有限公司 Copyright ©2015 www.zhizuobiao.com,All Rights Reserved.
 沪公网安备 31011502005948号    

©2015 www.zhizuobiao.com All Rights Reserved

208小时内训课程