1行定義
帰無仮説と対立仮説とは、仮説検定で否定をめざして立てる「差はない」などの仮説と、それが否定されたときに採る「差がある」などの仮説のことです。
くわしく
帰無仮説と対立仮説は、データから「差がある」「効果がある」といえるかを確かめる仮説検定で、最初に立てる2つの仮説です。新しい施策やモデルの効果を、偶然のぶれと区別するために使います。
考え方と手順
仮説検定では、まず「差はない」「効果はない」という仮説を置き、それがデータと矛盾するかを調べます。この否定をめざす仮説が帰無仮説(H0)です。帰無仮説が否定されたときに採用する、本来示したい仮説が対立仮説(H1)です。「差はない」と仮定したとき、手元のデータがめったに起きない結果になるなら、仮定のほうを疑います。これが仮説検定の基本的な考え方です。
- 帰無仮説と対立仮説を立てる。
- 有意水準(5%や1%が多い)を、データを見る前に決める。
- 帰無仮説が正しいと仮定して、観測した結果か、それ以上に極端な結果が出る確率(p値)を求める。
- p値が有意水準以下なら帰無仮説を棄却し、対立仮説を採用する。
計算例
2択の問題を解くモデルが、当てずっぽうより正確に答えているかを調べます。帰無仮説は「正解率は0.5」、対立仮説は「正解率は0.5より高い」です。対立仮説が「高い」の一方向だけなので、片側検定になります。
10問中9問に正解したとします。帰無仮説のもとで9問以上正解する確率は、(10C9 + 10C10) / 2^10 = (10 + 1) / 1024 ≈ 0.011です。これがp値です。有意水準5%より小さいので帰無仮説を棄却し、当てずっぽうより正確だと判断します。
2種類の誤り
帰無仮説が正しいのに棄却する誤りを第一種の過誤、帰無仮説が誤っているのに棄却できない誤りを第二種の過誤といいます。有意水準は、第一種の過誤の確率の上限です。
帰無仮説を棄却できなかったときは、「差があるとはいえない」にとどめます。「差がない」と証明されたわけではありません。
覚え方
第一種は「ないものを、あると言う」、第二種は「あるものを、見逃す」と覚えます。
G検定での出題
出題のされ方
否定したい側を帰無仮説に置く立て方、有意水準を先に決めてp値と比べる手順、棄却されなかったときの結論の述べ方、第一種の過誤と第二種の過誤の区別が問われます。
◯×チェック
次の文が正しいか、誤りかを選んでください。
-
帰無仮説が正しいのに棄却してしまう誤りを第一種の過誤といい、その確率は有意水準以下に抑えられる。
答えを見る
答え ◯ 正しい
有意水準5%で検定すれば、帰無仮説が正しいときに誤って棄却する確率は5%以下です。有意水準は、この誤りをどこまで許すかを決める値です。
-
有意水準は、データからp値を計算したあとで、帰無仮説を棄却できるような値を選んで決めてよい。
答えを見る
答え × 誤り
有意水準はデータを見る前に決めておきます。結果を見てから基準を動かすと、第一種の過誤の確率を有意水準以下に抑えるという前提が崩れます。
-
ほかの条件が同じなら、有意水準を小さくするほど第一種の過誤は起こりにくくなるが、第二種の過誤は起こりやすくなる。
答えを見る
答え ◯ 正しい
棄却の基準が厳しくなるため、本当は差があるのに見逃す誤りが増えます。両方を同時に減らすには、データを増やすなどの工夫が必要です。
この用語の練習問題
出典
- G検定 試験出題範囲(シラバス2024)第1.4版 (技術分野 項目37 AIに必要な数理・統計知識)
- NIST/SEMATECH e-Handbook of Statistical Methods (7.1.3 What are statistical tests?)
- Ronald L. Wasserstein, Nicole A. Lazar, The ASA Statement on p-Values: Context, Process, and Purpose, The American Statistician 70(2), 129–133 (2016)
- J. Neyman, E. S. Pearson, On the Problem of the Most Efficient Tests of Statistical Hypotheses, Philosophical Transactions of the Royal Society of London. Series A 231, 289–337 (1933)