统计学笔记2:数值方法描述

Posted 2023-05-12

参考技术A 感觉Markdown和富文本的对比简直是Mac与破系统的对比。
不知道为什么一行的公式图片在网页上显示效果不好。

样本统计量（sample statistics）：如果数据来自样本，计算的度量称为样本统计量。
总体参数（population parameters）：如果是数据来自总体，计算的度量称为总体参数。
点估计量（point estimator）：统计推断中，样本统计量被称为是相应总体参数的点估计量。

平均数（mean）：提供了数据中心的度量。

中位数（median）：对变量中心位置的一种度量。

几何平均数（geometric mean）：一种位置的度量，常用于分析财务数据的增长率。可以用于确定过去连续几个时期的平均变化率。

众数（mode）：出现次数最多的数据。

百分位数（percentile）：提供了数据如何散布在从最大值到最小值的区间上的信息。

数据中含有极端值时，中位数作为中心位置的度量比平均数更加合适，或者可以使用调整平均数（trimmed mean）。从数据中删除一定比例的最大值和最小值，然后计算剩余数据的平均值就能够得到调整平均数。

极差（range）：数据中最大值与最小值的差。
极差仅以两个观测值为依据，很容易受到异常值的影响。

四分位数间距（interquartile range，IQR）：第三四分位数与第一四分位数的差值。可以克服异常值的极差。

方差（variance）：所有数据对变异程度所做的一种度量。
平均数的离差（deviation about the mean）：每一个观测值与平均数的差称为平均数的离差。
总体方差（population variance）：如果数据来自总体，离差平方的平均值称为总体方差。

标准差（standard deviation）：方差的正平方根。与原始数据的但为量度相同，更容易进行比较。

标准差系数（coefficient of variation）：标准差相对于平均数大小的描述统计量称为标准差系数。

平均绝对偏差（MAE）：每个观测值与平均数之间的差一绝对值求和再除以所有观测值的个数。

偏度（skewness）：是分布偏斜方向和程度的度量，是统计数据分布非对称程度的数字特征。左偏的数据，偏度为负；右偏的数据，偏度为正。

z-分数（z-score）：z分数能够真实的反应一个分数距离平均数的相对标准距离。z分数测量实际数据的平均距离。z值提供了对偏离目标的评估。
任何观测值的z-分数都被认为是对数据集中观测值相对位置的度量。

切比雪夫定理（Chebyshev's theorem）：指出与平均数的距离在某个特定的个数标准差之内的数据值所占的比例。

经验法则：
对于钟型分布的数据：

确定异常值：

协方差（covariance）：协方差用于衡量两个变量的总体误差。而方差是协方差的一种特殊情况，即当两个变量是相同的情况。协方差表示的是两个变量总体误差的期望。

为了避免协方差的值以来x和y，使用相关系数对两变量间的相关关系进行度量。
相关系数（correlation coefficient）：度量两个变量间的线性关系。
皮尔逊积矩相关系数：

商务与经济统计第三章 数值方法

变异程度变量：即离散程度的度量

 

1  :  极差：最简单的变异程度度量

      极差=最大值-最小值

2  :  四分位数 间距  第三四分位数Q3与第一四分位数Q的差值，也就是说，四分位数间距是中    间50%数据的极差。

       IQR=Q₃-Q₁

3  ：方差

方差=∑(观测值-平均值)²/N

4:标准差：方差的平方根

5:标准差系数   -1  0    1     绝对值越接近1表示离散程度越小

标准差系数=（标准差/平均数）*100%

6:形态度量

样本偏移程度计算

import pandas as pd
x = [53, 61, 49, 66, 78, 47]
s = pd.Series(x)
print(s.skew())

7:相对位置的度量值能帮我们确定一个特殊的数值距平均数有多远

 z=（样本值-样本平均数）/标准差

--------------------------

切比雪夫定理：与平均数的距离在z个标准差之内的数据值所占的比例至少为（1-1/z²），其中z是大于1的实数。

切比雪夫定理可应用于任何数据集，并能够估计与平均数的距离在一定个数的标准差之间内的最少数量的数据值。如果已知数据集近似呈现钟型分布，则有更多的数据值在范围之内。

异常值检测方法： 

 

下限=Q1-1.5*IQR。     IQR=Q3-Q1

上限=Q1+1.5*IQR

用于第一和第三四分位数以及四分位数间距确定一场值的方法，不必与依据z-分数小于-3或大于3的方法相同。可以选用一种或来两种方法。