## 5.7 變異性:平均值與數據的擬合程度如何?
一旦我們描述了數據的中心趨勢,我們通常還想描述數據的變量——有時也稱為“分散度”,這反映了一個事實,即它描述了數據的分散程度。
我們已經遇到了上面的平方誤差之和,這是最常用的變異性度量的基礎:方差 _ 和標準差 _。一個總體的方差(稱為)只是平方誤差除以觀測次數的總和,也就是說,你之前遇到的 _ 平均平方誤差 _。__

其中是人口平均數。標準差就是這個的平方根,也就是我們以前看到的 _ 均方根誤差 _。標準偏差是有用的,因為誤差的單位與原始數據相同(撤消我們應用于誤差的平方)。
我們通常無法訪問整個群體,因此我們必須使用一個樣本來計算方差,我們稱之為,其中“hat”表示這是一個基于樣本的估計。的方程式與的方程式相似:

這兩個方程之間的唯一區別是我們用 n-1 而不是 n 來除。這與一個基本的統計概念有關:_ 自由度 _。記住,為了計算樣本方差,我們首先必須估計樣本均值。在估計了這一點之后,數據中的一個值就不再是自由變化的了。例如,假設我們有以下數據點:
```r
# generate example data points
dfDf <-
tibble(
x = c(3, 5, 7, 9, 11)
)
pander(dfDf)
```
<colgroup><col style="width: 5%"></colgroup>
| X |
| --- |
| 三 |
| 5 個 |
| 7 |
| 9 |
| 11 個 |
現在我們計算平均值:
```r
# compute mean
meanx <-
dfDf %>%
summarize(
mean(x)
) %>%
pull()
sprintf('%0.2f',meanx)
```
```r
## [1] "7.00"
```
因為我們知道這個數據集的平均值是 7,所以我們可以計算出如果缺少某個特定的值會是什么。例如,假設我們要模糊第一個值(3)。這樣做之后,我們仍然知道它的值必須是 3,因為 7 的平均值意味著所有值的總和是和。
所以當我們說我們已經“失去”了一定程度的自由,這意味著有一個值在擬合模型后是不能自由改變的。在樣本方差的背景下,如果我們不考慮失去的自由度,那么我們對樣本方差的估計將是 _ 偏向 _——也就是說,它將小于真實(總體)值。
- 前言
- 0.1 本書為什么存在?
- 0.2 你不是統計學家-我們為什么要聽你的?
- 0.3 為什么是 R?
- 0.4 數據的黃金時代
- 0.5 開源書籍
- 0.6 確認
- 1 引言
- 1.1 什么是統計思維?
- 1.2 統計數據能為我們做什么?
- 1.3 統計學的基本概念
- 1.4 因果關系與統計
- 1.5 閱讀建議
- 2 處理數據
- 2.1 什么是數據?
- 2.2 測量尺度
- 2.3 什么是良好的測量?
- 2.4 閱讀建議
- 3 概率
- 3.1 什么是概率?
- 3.2 我們如何確定概率?
- 3.3 概率分布
- 3.4 條件概率
- 3.5 根據數據計算條件概率
- 3.6 獨立性
- 3.7 逆轉條件概率:貝葉斯規則
- 3.8 數據學習
- 3.9 優勢比
- 3.10 概率是什么意思?
- 3.11 閱讀建議
- 4 匯總數據
- 4.1 為什么要總結數據?
- 4.2 使用表格匯總數據
- 4.3 分布的理想化表示
- 4.4 閱讀建議
- 5 將模型擬合到數據
- 5.1 什么是模型?
- 5.2 統計建模:示例
- 5.3 什么使模型“良好”?
- 5.4 模型是否太好?
- 5.5 最簡單的模型:平均值
- 5.6 模式
- 5.7 變異性:平均值與數據的擬合程度如何?
- 5.8 使用模擬了解統計數據
- 5.9 Z 分數
- 6 數據可視化
- 6.1 數據可視化如何拯救生命
- 6.2 繪圖解剖
- 6.3 使用 ggplot 在 R 中繪制
- 6.4 良好可視化原則
- 6.5 最大化數據/墨水比
- 6.6 避免圖表垃圾
- 6.7 避免數據失真
- 6.8 謊言因素
- 6.9 記住人的局限性
- 6.10 其他因素的修正
- 6.11 建議閱讀和視頻
- 7 取樣
- 7.1 我們如何取樣?
- 7.2 采樣誤差
- 7.3 平均值的標準誤差
- 7.4 中心極限定理
- 7.5 置信區間
- 7.6 閱讀建議
- 8 重新采樣和模擬
- 8.1 蒙特卡羅模擬
- 8.2 統計的隨機性
- 8.3 生成隨機數
- 8.4 使用蒙特卡羅模擬
- 8.5 使用模擬統計:引導程序
- 8.6 閱讀建議
- 9 假設檢驗
- 9.1 無效假設統計檢驗(NHST)
- 9.2 無效假設統計檢驗:一個例子
- 9.3 無效假設檢驗過程
- 9.4 現代環境下的 NHST:多重測試
- 9.5 閱讀建議
- 10 置信區間、效應大小和統計功率
- 10.1 置信區間
- 10.2 效果大小
- 10.3 統計能力
- 10.4 閱讀建議
- 11 貝葉斯統計
- 11.1 生成模型
- 11.2 貝葉斯定理與逆推理
- 11.3 進行貝葉斯估計
- 11.4 估計后驗分布
- 11.5 選擇優先權
- 11.6 貝葉斯假設檢驗
- 11.7 閱讀建議
- 12 分類關系建模
- 12.1 示例:糖果顏色
- 12.2 皮爾遜卡方檢驗
- 12.3 應急表及雙向試驗
- 12.4 標準化殘差
- 12.5 優勢比
- 12.6 貝葉斯系數
- 12.7 超出 2 x 2 表的分類分析
- 12.8 注意辛普森悖論
- 13 建模持續關系
- 13.1 一個例子:仇恨犯罪和收入不平等
- 13.2 收入不平等是否與仇恨犯罪有關?
- 13.3 協方差和相關性
- 13.4 相關性和因果關系
- 13.5 閱讀建議
- 14 一般線性模型
- 14.1 線性回歸
- 14.2 安裝更復雜的模型
- 14.3 變量之間的相互作用
- 14.4“預測”的真正含義是什么?
- 14.5 閱讀建議
- 15 比較方法
- 15.1 學生 T 考試
- 15.2 t 檢驗作為線性模型
- 15.3 平均差的貝葉斯因子
- 15.4 配對 t 檢驗
- 15.5 比較兩種以上的方法
- 16 統計建模過程:一個實例
- 16.1 統計建模過程
- 17 做重復性研究
- 17.1 我們認為科學應該如何運作
- 17.2 科學(有時)是如何工作的
- 17.3 科學中的再現性危機
- 17.4 有問題的研究實踐
- 17.5 進行重復性研究
- 17.6 進行重復性數據分析
- 17.7 結論:提高科學水平
- 17.8 閱讀建議
- References