统计分析笔记3

文章目录

  • 统计检验
    • 选择正确的统计检验
      • 统计检验是做什么的?
      • 何时进行统计检验
      • 选择参数化测试:回归、比较或相关性
      • 选择非参数检验
    • 假设检验的假设条件
      • skewness
        • 什么是零偏度
        • right skew
        • left skew
        • 计算skewness
        • what to do if your data is skewed
      • kurtosis
        • 怎么计算kurtosis
    • t Tests
        • When to use a T test
        • What type of t test should I use?
        • 执行T检验

统计检验

选择正确的统计检验

统计检验用于假设检验。它们可以用来:

确定预测变量与结果变量是否有统计学上显著的关系。
估计两个或多个组之间的差异。
统计检验假设零假设为组间无关系或无差异。然后,它们确定观察到的数据是否落在零假设预测的值范围之外。

如果你已经知道你正在处理的变量类型,你可以使用流程图来为你的数据选择正确的统计检验。

统计检验是做什么的?

统计检验的工作原理是通过计算一个检验统计量——一个数字,描述你的测试中变量之间的关系与无关系的零假设相比有多大的不同。

然后,它计算一个 p 值(概率值)。p 值估计如果零假设(即变量之间无关系)为真,你看到由检验统计量描述的差异的可能性有多大。

如果检验统计量的值比从零假设计算出的统计量更极端,那么你可以推断出预测变量和结果变量之间存在统计学上显著的关系。

如果检验统计量的值不如从零假设计算出的那个极端,那么你可以推断预测变量和结果变量之间不存在统计学上显著的关系。

何时进行统计检验

你可以对以统计有效方式收集的数据进行统计检验——无论是通过实验还是通过使用概率抽样方法进行的观察。

为了使统计检验有效,你的样本量需要足够大,以近似所研究总体的真实分布。

要确定使用哪种统计检验,你需要知道:

  • 你的数据是否满足某些假设。
  • 你正在处理的变量类型。

统计假设
统计测试对它们正在测试的数据做出一些常见假设:

  • 观察的独立性(又称无自相关):你在测试中包含的观察/变量是不相关的(例如,对单一测试主体的多次测量不是独立的,而对多个不同测试主体的测量是独立的)。
  • 方差的同质性:被比较各组内的方差在所有组中是相似的。如果一个组的变异性比其他组大得多,它会限制测试的有效性。
  • 数据的正态性:数据遵循正态分布(又称钟形曲线)。这个假设只适用于定量数据。

如果你的数据不满足正态性或方差同质性的假设,你可能能进行非参数统计测试,这允许你在不对数据分布做任何假设的情况下进行比较。
如果你的数据不满足观察独立性的假设,你可能能使用考虑到你数据结构的测试(重复测量测试或包含阻塞变量的测试)。

变量类型
你拥有的变量类型通常决定了你可以使用什么类型的统计测试。

定量变量代表事物的数量(例如,森林中的树木数量)。定量变量的类型包括:

  • 连续变量(又称比率变量):代表测量值,通常可以划分为小于一的单位(例如,0.75克)。
  • 离散变量(又称整数变量):代表计数,通常不能划分为小于一的单位(例如,1棵树)。

分类变量代表事物的分组(例如,森林中不同的树种)。分类变量的类型包括:

  • 序数变量:代表有顺序的数据(例如,排名)。
  • 名义变量:代表组名称(例如,品牌或物种名称)。
  • 二元变量:代表有是/否或1/0结果的数据(例如,赢或输)。

选择适合你收集的预测变量和结果变量类型的测试(如果你正在做实验,这些是独立变量和依赖变量)。请参阅下面的表格,以查看哪个测试最符合你的变量。

选择参数化测试:回归、比较或相关性

参数化测试通常比非参数化测试有更严格的要求,并且能够从数据中做出更强的推断。它们只能用于符合统计测试常见假设的数据。

最常见的参数化测试类型包括回归测试、比较测试和相关性测试。

回归测试
回归测试寻找因果关系。它们可以用来估计一个或多个连续变量对另一个变量的影响。
在这里插入图片描述

比较测试
比较测试寻找组间平均值的差异。它们可以用来测试分类变量对某些其他特征的平均值的影响。

T检验用于比较恰好两组的平均值(例如,男性和女性的平均身高)。ANOVA(方差分析)和MANOVA(多元方差分析)测试用于比较两个以上组的平均值(例如,儿童、青少年和成人的平均身高)。
在这里插入图片描述

相关性测试
相关性测试检查变量之间是否存在关系,而不假设因果关系。

这些可以用来测试你想要在(例如)多元回归测试中使用的两个变量是否存在自相关。
在这里插入图片描述

选择非参数检验

非参数检验对数据的假设不那么多,当一个或多个常见的统计假设被违反时,它们是有用的。然而,它们做出的推论不如参数检验那样强。
在这里插入图片描述
在这里插入图片描述

假设检验的假设条件

skewness

偏度是分布不对称性的度量。当分布的左右两侧不是镜像关系时,该分布是不对称的。

分布可以有右偏(或正偏)、左偏(或负偏)或零偏度。右偏分布的右侧比峰值更长,左偏分布的左侧比峰值更长:
在这里插入图片描述
您可能想要计算分布的偏度以:

  • 描述变量的分布情况,与其他描述性统计量一同使用
  • 确定一个变量是否呈正态分布。正态分布的偏度为零,是许多统计程序的假设之一
什么是零偏度

当一个分布的偏度为零时,它是对称的。它的左右两侧是镜像的。

正态分布具有零偏度,但它们并不是唯一具有零偏度的分布。任何对称分布,如均匀分布或一些双峰(两个顶点)分布,也将具有零偏度。

检查一个变量是否有偏斜分布的最简单方法是将其绘制在直方图中。

该分布大致对称,观测值在其峰值的左右两侧分布相似。因此,该分布的偏度大约为零。
在这里插入图片描述

在偏度为零的分布中,均值和中位数相等。

零偏度:均值 = 中位数

right skew

在这里插入图片描述
Right skew: mean > median

left skew

在这里插入图片描述

Left skew: mean < median

计算skewness

在这里插入图片描述

what to do if your data is skewed

如果您的数据偏斜,您通常有三种选择,如果您的统计程序要求正态分布而您的数据偏斜:

  • 什么都不做。许多统计测试,包括t检验、方差分析(ANOVA)和线性回归,并不非常敏感于偏斜数据。特别是如果偏斜轻微或中等,最好忽略它。
  • 使用不同的模型。您可能想选择一个不假设正态分布的模型。非参数测试或广义线性模型可能更适合您的数据。
  • 转换变量。另一个选项是转换一个偏斜变量,使其偏斜程度减小。“转换”意味着对变量的所有观察值应用相同的函数。
    在这里插入图片描述

kurtosis

峰度是衡量分布尾部厚度的一个指标。尾部厚度是指异常值出现的频率。相对于正态分布的超额峰度是衡量分布尾部厚度的一个指标。

  • 具有中等峰度(中等尾部)的分布是中峰的。
  • 具有低峰度(薄尾部)的分布是扁峰的。
  • 具有高峰度(厚尾部)的分布是尖峰的。

尾部是分布两侧逐渐变细的末端。它们代表与均值相比极高或极低的值的概率或频率。换句话说,尾部代表异常值出现的频率。

在这里插入图片描述

怎么计算kurtosis

在这里插入图片描述
在这里插入图片描述
四阶标准矩 (Fourth order standardized moment)是峰度(Kurtosis),峰度是描述随机变量分布尖锐程度的统计量,衡量分布曲线在均值附近平坦或者是尖峰的程度。当峰度值等于3时,当前分布的峰态与正态分布一致;当峰度值大于3时,均值附近较尖锐,尾部较厚,高峰度分布;当峰度值小于3时,均值附近较平坦,尾部较薄,低峰度分布。

t Tests

T检验是一种用来比较两组均值的统计检验。它常用于假设检验中,以确定某个过程或治疗是否真的对感兴趣的总体有影响,或者两组之间是否存在差异。

t检验示例
您想知道根据其种类,鸢尾花的花瓣长度均值是否有差异。您在一个花园中找到两种不同的鸢尾花种类,并测量了每种种类的25朵花的花瓣。您可以使用t检验和零假设及备择假设来检验这两组之间的差异。
零假设(H0)是这两个组的均值之间的真实差异为零。
备择假设(Ha)是真实差异不为零。

When to use a T test

T检验仅在比较两组的均值时使用(也称为成对比较)。如果您想比较两个以上的组,或者想进行多个成对比较,请使用ANOVA检验或事后检验。

T检验是一种参数差异检验,这意味着它对数据做出了与其他参数检验相同的假设。T检验假设您的数据:

  • 是独立的
  • (大致)呈正态分布
  • 在每个被比较的组内有相似的方差量(也称为方差齐性)

如果您的数据不符合这些假设,您可以尝试T检验的非参数替代方法,如Wilcoxon符号秩检验,用于方差不等的数据。

What type of t test should I use?

在选择T检验时,您需要考虑两件事:被比较的组是否来自单一群体或两个不同群体,以及您是否想测试特定方向上的差异。

One-sample, two-sample, or paired t test?

  • 如果组来自单一群体(例如,在实验处理前后进行测量),进行配对T检验。这是一种被试内设计。
  • 如果组来自两个不同的群体(例如,两种不同的物种,或来自两个不同城市的人),进行两样本T检验(也称为独立T检验)。这是一种被试间设计。
  • 如果有一个组与标准值进行比较(例如,将液体的酸度与中性pH值7进行比较),进行单样本T检验。

One-tailed or two-tailed t test?

  • 如果你只关心两个群体是否不同,进行双尾T检验。
  • 如果你想知道一个群体的平均值是大于还是小于另一个群体,进行单尾T检验

t test example
在你测试花瓣长度是否因种类而异的实验中:
你的观测来自两个不同的群体(不同的种类),因此你进行了两样本T检验。
你不关心差异的方向,只关心是否存在差异,所以你选择使用双尾T检验。

执行T检验

T检验通过使用两组均值之差与两组的合并标准误之比来估计两组均值之间的真实差异。你可以使用公式手动计算,或使用统计分析软件。
在这里插入图片描述
较大的t值显示组均值之间的差异大于合并标准误,表明组之间的差异更显著。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/706822.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

BevFusion (2): nuScenes 数据介绍及点云可视化

1. nuScenes 数据集 1.1 概述 nuScenes 数据集 (pronounced /nu:ːsiː:nz/) 是由 Motional (以前称为 nuTonomy) 团队开发的自动驾驶公共大型数据集。nuScenes 数据集的灵感来自于开创性的 KITTI 数据集。 nuScenes 是第一个提供自动驾驶车辆整个传感器套件 (6 个摄像头、1 …

计算机网络:IP

引言&#xff1a; IP协议是互联网协议族中的核心协议之一&#xff0c;负责为数据包在网络中传输提供路由寻址。它定义了数据包如何在互联网上从源地址传输到目的地址的规则和流程。IP协议使得各种不同类型的网络设备能够相互通信&#xff0c;实现了全球范围内的信息交换。 目录…

Qt项目:网络1

文章目录 项目&#xff1a;网路项目1&#xff1a;主机信息查询1.1 QHostInfo类和QNetworkInterface类1.2 主机信息查询项目实现 项目2&#xff1a;基于HTTP的网络应用程序2.1 项目中用到的函数详解2.2 主要源码 项目&#xff1a;网路 项目1&#xff1a;主机信息查询 使用QHostI…

基于vue的图书管理系统的设计与实现

高校师生在教学中承受的压力越大就对知识拥有了更多的需求&#xff0c;而满足这一需求的最佳场所无疑就是图书馆。当前虽然信息技术在各个方面都发挥出重要作用&#xff0c;但是在相当多的高校图书馆中依然由工作人员手动完成图书借阅、归还及逾期提醒等所有工作&#xff0c;在…

如何使用Logstash搜集日志传输到es集群并使用kibana检测

引言&#xff1a;上一期我们进行了对Elasticsearch和kibana的部署&#xff0c;今天我们来解决如何使用Logstash搜集日志传输到es集群并使用kibana检测 目录 Logstash部署 1.安装配置Logstash &#xff08;1&#xff09;安装 &#xff08;2&#xff09;测试文件 &#xff…

集群分发脚本xsync

集群分发脚本xsync 一、简介二、环境准备三、添加到机器的 hosts 文件四、ping 命令测试五、SSH 配置5.1.本地先生成公钥和私钥5.2.将公钥拷贝到其他机器 六、xsync 脚本编写6.1.安装 rsync6.2.新建 xsync.sh6.3.xsync.sh脚本6.4.赋予脚本执行权限6.5.测试 endl 一、简介 配置…

完全分布式运行模式

完全分布式运行模式 分析&#xff1a;之前已经配置完成 ​ 1&#xff09;准备3台客户机&#xff08;关闭防火墙、静态ip、主机名称&#xff09; ​ 2&#xff09;安装JDK ​ 3&#xff09;配置环境变量 ​ 4&#xff09;安装Hadoop ​ 5&#xff09;配置环境变量 ​ 6&am…

163邮箱SMTP端口号及服务器地址详细设置?

163邮箱SMTP端口号是什么&#xff1f;163邮件SMTP设置教程&#xff1f; 除了基本的邮箱账号和密码外&#xff0c;还需要了解SMTP服务器地址和端口号&#xff0c;以及相应的设置。这些设置对于确保邮件能够顺利发送至关重要。下面&#xff0c;蜂邮EDM将详细介绍163邮箱SMTP端口…

Ubuntu常用状态命令

目录 一、温度 1&#xff0c;查看CPU温度 2&#xff0c;查看硬盘温度 二、CPU状态 1&#xff0c;显示CPU的详细信息&#xff0c;包括型号、频率、缓存等 2&#xff0c;显示CPU架构、CPU核心数、线程数、频率等信息 三、登录状态 1&#xff0c;查看成功登录的用户 2&am…

2024年腾讯云4核8G12M配置的轻量服务器同时支持多大访问量?

腾讯云4核8G服务器支持多少人在线访问&#xff1f;支持25人同时访问。实际上程序效率不同支持人数在线人数不同&#xff0c;公网带宽也是影响4核8G服务器并发数的一大因素&#xff0c;假设公网带宽太小&#xff0c;流量直接卡在入口&#xff0c;4核8G配置的CPU内存也会造成计算…

第12届生物发酵产品与技术装备展火热登场-通用环境控制技术

参展企业介绍 合肥通用环境控制技术有限责任公司隶属于中国机械工业集团有限公司&#xff08;世界500强排名279&#xff09;&#xff0c;是中央直接管理的国有重要骨干上市央企&#xff08;国机通用 600444&#xff09;&#xff0c;是国家级高新技术企业、国家火炬计划重点高新…

区块链智能合约开发

一.区块链的回顾 1.区块链 区块链实质上是一个去中心化、分布式的可进行交易的数据库或账本 特征: 去中心化&#xff1a;简单来说&#xff0c;在网络上一个或多个服务器瘫痪的情况下&#xff0c;应用或服务仍然能够持续地运行&#xff0c;这就是去中心化。服务和应用部署在…

Mendix 10.7 发布- Go Mac It!

在我们上个月发布了硕果累累的 Mendix 10.6 MTS 之后&#xff0c;您是否还没有抚平激动的情绪&#xff1f;好吧&#xff0c;不管您是否已经准备好&#xff0c;本月将带来另一个您想知道的大亮点——Mac版Studio Pro&#xff01;但这还不是全部。本月&#xff0c;我们还将推出Re…

Kafka安全模式之身份认证

一、简介 Kafka作为一个分布式的发布-订阅消息系统&#xff0c;在日常项目中被频繁使用&#xff0c;通常情况下无论是生产者还是消费者只要订阅Topic后&#xff0c;即可进行消息的发送和接收。而kafka在0.9.0.0版本后添加了身份认证和权限控制两种安全服务&#xff0c;本文主要…

dcat admin 自定义页面

自定义用户详情页 整体分为两部分&#xff1a;用户信息、tab框 用户信息采用自定义页面加载&#xff0c;controller代码如下&#xff1a; protected function detail($id) {return Show::make($id, GameUser::with(finance), function (Show $show) {// 这段就是加载自定义页面…

frp 内网穿透 linux部署版

frp 内网穿透 linux部署版 前提安装 frp阿里云服务器配置测试服务器配置访问公网 前提 使用 frp&#xff0c;您可以安全、便捷地将内网服务暴露到公网&#xff0c;通过访问公网 IP 直接可以访问到内网的测试环境。准备如下&#xff1a; 公网 IP已部署好的测试服务 IP:端口号阿…

【可实战】被测系统业务架构、系统架构、技术架构、数据流、业务逻辑分析

一、为什么要学习 更深的理解业务逻辑&#xff08;公司是做什么的&#xff1f;它最重要的商务决策是什么&#xff1f;它里面的数据流是怎么做的&#xff1f;有哪些业务场景&#xff1f;考验你对这家公司、对所负责业务的熟悉程度。公司背后服务器用什么软件搭建的&#xff1f;…

小程序框架(概念、工作原理、发展及应用)

引言 移动应用的普及使得用户对于轻量级、即时可用的应用程序需求越来越迫切。在这个背景下&#xff0c;小程序应运而生&#xff0c;成为一种无需下载安装、即点即用的应用形式&#xff0c;为用户提供了更便捷的体验。小程序的快速发展离不开强大的开发支持&#xff0c;而小程…

ubuntu20下使用 torchviz可视化计算图

安装 torchviz&#xff1a; pip install torchviz示例代码&#xff1a;下面是一个简单的示例代码&#xff0c;展示如何使用 torchviz 可视化计算图&#xff1a; python import torch from torchviz import make_dot# 创建一个简单的模型 model torch.nn.Sequential(torch.nn…

40+个适合高中生探索的计算机科学研究思路课题

作为一名对计算机科学感兴趣的高中生&#xff0c;应该如何提升对这个学科的的认知呢&#xff1f;进行研究就是一个不错的选择&#xff0c;通过研究&#xff0c;你可以加深对这个领域的理解&#xff0c;获得宝贵的技能&#xff0c;并为社会做出贡献&#xff01; 研究经验可以…