標準誤差とは?標準偏差との違いやエクセル計算式と信頼区間を徹底検証
業務で分析を進める中で、算出された数値を見て「標準誤差が想定より不自然に大きい」と頭を抱えるシチュエーションがあります。標準誤差が大きい理由は、数式(s / √n)に立ち返れば自ずと3つの要因に絞り込まれます。
- サンプルサイズ(n)の絶対的不足:パイロットテストや予算の制約により、nが10や20程度にとどまっている場合、√nが小さすぎるため誤差は必然的に膨張します。
- 母集団自体のばらつき(s)の大きさ:顧客層の属性が雑多すぎたり、異常値(外れ値)が混入している場合、標準偏差 s が吊り上がり、結果としてSEを押し上げます。
- サンプリングバイアスと測定ノイズ:調査設計の不備により、回答のブレや計測機器のエラーが頻発しているケースです。
標準誤差の拡大は、ビジネスにおいて致命的な判断ミスを誘発します。その影響が最も色濃く現れるのが、95パーセント信頼区間の求め方です。95%信頼区間とは、「母集団から同じ方法で標本を抽出する作業を100回繰り返した際、およそ95回はその区間内に母平均が含まれる」とされる範囲を指します。
サンプルサイズが十分に大きい正規分布近似のもとでは、信頼区間は以下の式で計算されます。
95%信頼区間 = 標本平均 ± 1.96 × SE
たとえば、新機能の導入による作業時間削減効果を検証した際、標本平均が「-10分」、標準誤差(SE)が「6分」だったとします。このときの95%信頼区間を計算すると、およそ「-10分 ± (1.96 × 6分) = -10分 ± 11.76分」、すなわち【-21.76分 〜 +1.76分】となります。区間の中にプラス(作業時間が増加してしまう可能性)が跨いで含まれてしまっているため、「新機能に効果がある」とは統計的に断言できなくなります。
この信頼区間の幅を狭めて因果関係をクリアに証明するために不可欠なのが、統計検定での標準誤差の扱いです。A/Bテスト等で用いられるt検定の検定統計量 t値 は、「2群の平均値の差 ÷ 差の標準誤差」で算出されます。分母である標準誤差が肥大化していれば、どんなに施策に効果があってもt値は小さくなり、有意差(p < 0.05)を検出できずに施策がお蔵入りになる「第2種の過誤(見落としの誤り)」を招くことになります。