热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

建立概率统计思维,还原事物的本质

1、打开手机的天气预报软件,我们除了能看到明天是晴天还是雨天,还可以看到具体的降雨概率,比如明天10点的降雨概率是60%。随着技术水平的提高,天气预报的准确率越来越高,我们就可以根

1、

打开手机的天气预报软件,我们除了能看到明天是晴天还是雨天,还可以看到具体的降雨概率,比如明天10点的降雨概率是60%。随着技术水平的提高,天气预报的准确率越来越高,我们就可以根据降雨概率的大小来决定明天出门要不要带伞。这只是概率在生活中的一个具体应用,其实在生活中概率无处不在。

概念

概率就是用数值表示某件事情发生的可能性。

这个数值始终介于0和1之间,概率为0 表示这件事不可能发生,概率为1表示这件事必然发生,抛一枚硬币,正面朝上的概率为1/2。

计算公式

事件A的概率=《建立概率统计思维,还原事物的本质》http://students.brown.edu/seeing-theory/basic-probability/index.html里面有一个抛骰子的游戏,可以很直观的理解大数定律和小数定律。因此,对于有志于数据分析工作的我们,一定不能掉落小数定律的陷阱,要充分考虑数据的深度和广度,防止以偏概全。

学习概率最大的收获就是,生活中的每一次决策都应该选择大概率成功的事件,在同样的努力程度下,选择一个资源更丰富的环境,可以提高自己的成功概率。

2、描述统计学

相对于枯燥的数字,人们更喜欢直观的描述,而数据分析师要做的就是在一大堆数字里找出规律,并用简单的几个数据和图标展示给大家,在这背后就会用到统计学的知识。

其中常用的指标有平均值、四分位数、标准差、标准分。

平均值,很好理解,就是一组数据的算术和除以数据个数,但是不要被平均数欺骗了,因为很可能这一组数据中,最小的和最大的数之间差距会很大。比如,当我们的财富被马云平均时,我们瞬间会成为亿万富翁。

四分位数,在计算四分位数之前,先找到中位数。首先将一组数据从小到大排列,如果数据总数n为奇数,则中位数就是位于中间位置的数值;如果n为偶数,则中位数就是中间两个数的平均值。而四分位数就是除去中位数后的前半部分数据的中位数——下四分位数,后半部分数据的中位数——上四分位数。借用课程中的一幅图就能很好理解了。

《建立概率统计思维,还原事物的本质》
《建立概率统计思维,还原事物的本质》

箱线图可以把一组数据的最小值,最大值,上四分位数,中位数,下四分位数分别反映在一副图中,通过不同数据组的对比,可以很清晰的发现其中的差距。

《建立概率统计思维,还原事物的本质》
《建立概率统计思维,还原事物的本质》

标准差,反映数据偏离平均值的程度,数值越大,说明数据波动越大,越不稳定。用 《建立概率统计思维,还原事物的本质》
《建立概率统计思维,还原事物的本质》

课程的学习中,在理解质量管理中6 《建立概率统计思维,还原事物的本质》 时有点困难。六西格玛反映百万抽样中只有3.4个不合格,说明产品质量很稳定。根据计算公式,我以为要得到更大的标准分,数据就应该偏离平均数越大,这样反而质量更不好。后来才意识到,分母部分的标准差越小,标准分越大,说明数据波动越小,质量越稳定。

在实际应用时,抓取财经网站的股票数据,理解各种统计指标的含义,并用图示分析股票的走势,跟着课程中的代码在notebook中敲了一遍,感受到了python的强大。在这个过程中被一段读取网站的数据的代码卡住了,一直运行不出想要的结果。后来,寻求社群成员的帮助后,在猴子老师提供的课程资料中找到了解决办法。在以后的学习中,除了认真听课程中的内容,还要经常关注课程资料。

小结

建立概率统计思维可以让繁杂的数据变得有序,能更直观反映出客观事实,有时候需要一大段话才能说明白的事情,只要一个统计指标就可以搞定,这就是数据分析最厉害的地方,一切用数字说话,直达事物的本质。


推荐阅读
  • 微软头条实习生分享深度学习自学指南
    本文介绍了一位微软头条实习生自学深度学习的经验分享,包括学习资源推荐、重要基础知识的学习要点等。作者强调了学好Python和数学基础的重要性,并提供了一些建议。 ... [详细]
  • 如何实现织梦DedeCms全站伪静态
    本文介绍了如何通过修改织梦DedeCms源代码来实现全站伪静态,以提高管理和SEO效果。全站伪静态可以避免重复URL的问题,同时通过使用mod_rewrite伪静态模块和.htaccess正则表达式,可以更好地适应搜索引擎的需求。文章还提到了一些相关的技术和工具,如Ubuntu、qt编程、tomcat端口、爬虫、php request根目录等。 ... [详细]
  • 阿里Treebased Deep Match(TDM) 学习笔记及技术发展回顾
    本文介绍了阿里Treebased Deep Match(TDM)的学习笔记,同时回顾了工业界技术发展的几代演进。从基于统计的启发式规则方法到基于内积模型的向量检索方法,再到引入复杂深度学习模型的下一代匹配技术。文章详细解释了基于统计的启发式规则方法和基于内积模型的向量检索方法的原理和应用,并介绍了TDM的背景和优势。最后,文章提到了向量距离和基于向量聚类的索引结构对于加速匹配效率的作用。本文对于理解TDM的学习过程和了解匹配技术的发展具有重要意义。 ... [详细]
  • 云原生边缘计算之KubeEdge简介及功能特点
    本文介绍了云原生边缘计算中的KubeEdge系统,该系统是一个开源系统,用于将容器化应用程序编排功能扩展到Edge的主机。它基于Kubernetes构建,并为网络应用程序提供基础架构支持。同时,KubeEdge具有离线模式、基于Kubernetes的节点、群集、应用程序和设备管理、资源优化等特点。此外,KubeEdge还支持跨平台工作,在私有、公共和混合云中都可以运行。同时,KubeEdge还提供数据管理和数据分析管道引擎的支持。最后,本文还介绍了KubeEdge系统生成证书的方法。 ... [详细]
  • 本文是一位90后程序员分享的职业发展经验,从年薪3w到30w的薪资增长过程。文章回顾了自己的青春时光,包括与朋友一起玩DOTA的回忆,并附上了一段纪念DOTA青春的视频链接。作者还提到了一些与程序员相关的名词和团队,如Pis、蛛丝马迹、B神、LGD、EHOME等。通过分享自己的经验,作者希望能够给其他程序员提供一些职业发展的思路和启示。 ... [详细]
  • 本文讨论了Alink回归预测的不完善问题,指出目前主要针对Python做案例,对其他语言支持不足。同时介绍了pom.xml文件的基本结构和使用方法,以及Maven的相关知识。最后,对Alink回归预测的未来发展提出了期待。 ... [详细]
  • Monkey《大话移动——Android与iOS应用测试指南》的预购信息发布啦!
    Monkey《大话移动——Android与iOS应用测试指南》的预购信息已经发布,可以在京东和当当网进行预购。感谢几位大牛给出的书评,并呼吁大家的支持。明天京东的链接也将发布。 ... [详细]
  • 本文介绍了使用CentOS7.0 U盘刻录工具进行安装的详细步骤,包括使用USBWriter工具刻录ISO文件到USB驱动器、格式化USB磁盘、设置启动顺序等。通过本文的指导,用户可以轻松地使用U盘安装CentOS7.0操作系统。 ... [详细]
  • GetWindowLong函数
    今天在看一个代码里头写了GetWindowLong(hwnd,0),我当时就有点费解,靠,上网搜索函数原型说明,死活找不到第 ... [详细]
  • EPICS Archiver Appliance存储waveform记录的尝试及资源需求分析
    本文介绍了EPICS Archiver Appliance存储waveform记录的尝试过程,并分析了其所需的资源容量。通过解决错误提示和调整内存大小,成功存储了波形数据。然后,讨论了储存环逐束团信号的意义,以及通过记录多圈的束团信号进行参数分析的可能性。波形数据的存储需求巨大,每天需要近250G,一年需要90T。然而,储存环逐束团信号具有重要意义,可以揭示出每个束团的纵向振荡频率和模式。 ... [详细]
  • Nginx使用(server参数配置)
    本文介绍了Nginx的使用,重点讲解了server参数配置,包括端口号、主机名、根目录等内容。同时,还介绍了Nginx的反向代理功能。 ... [详细]
  • 这是原文链接:sendingformdata许多情况下,我们使用表单发送数据到服务器。服务器处理数据并返回响应给用户。这看起来很简单,但是 ... [详细]
  • Oracle Database 10g许可授予信息及高级功能详解
    本文介绍了Oracle Database 10g许可授予信息及其中的高级功能,包括数据库优化数据包、SQL访问指导、SQL优化指导、SQL优化集和重组对象。同时提供了详细说明,指导用户在Oracle Database 10g中如何使用这些功能。 ... [详细]
  • 无损压缩算法专题——LZSS算法实现
    本文介绍了基于无损压缩算法专题的LZSS算法实现。通过Python和C两种语言的代码实现了对任意文件的压缩和解压功能。详细介绍了LZSS算法的原理和实现过程,以及代码中的注释。 ... [详细]
  • 词袋模型的通俗介绍
    词,袋, ... [详细]
author-avatar
常德锦江-余欢
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有