# カイ二乗検定についてわかりやすく解説！Pyhonでの実装を一緒に見ていこう！

> 当サイト【スタビジ】の本記事では、統計的検定の1つであるカイ二乗検定についてまとめていきます！カイ二乗検定はビジネスシーンで使用することが多く分かっていると非常に役立ちます。RでもPythonでも簡単に使うことができるのでぜひマスターしてくださいね！

- URL: https://toukei-lab.com/chisq-test
- 公開: 2022.11.29 / 更新: 2025.03.09
- サイト: スタビジ（https://toukei-lab.com）

:::talk{who="umatan"}
本記事では、統計的検定の1つであるカイ二乗検定について分かりやすくまとめていきます！カイ二乗検定はビジネスシーンで使用することが多く、分かっていると非常に役立ちます。RでもPythonでも簡単に使うことができるのでぜひマスターしてくださいね！
:::

こんにちは！

データサイエンティストのウマたん（[@statistics1012](https://twitter.com/statistics1012?lang=ja)）です。

ある事象の仮説を数理的に確かめるために行われる[統計的検定](/%e6%a4%9c%e5%ae%9a)。

統計学の基本であり、様々なところで用いられている現場でも有用な手法です。

そんな統計的検定にはいくつか種類がありますが、この記事では<mark>実務で使われることの多い**カイ二乗検定**</mark>について見ていきたいと思います。

以下の動画でもカイ二乗検定について解説していますので合わせてチェックしてみてください！

::youtube{#-qGpcxtkrp8}

:::talk{who="umatan"}
カイ二乗検定は[デジタルマーケティング](/web-marketing-study)の世界でよく使われる手法だよ！
:::

まずはじめにカイ二乗検定の**理論**を見ていき、最終的にはPythonでの**実装**を行っていきます！

## カイ二乗検定とは？

![](/wp-content/uploads/2019/04/52ceff2ccf51b6465679ab4c976fc8b0_s.jpg)

カイ二乗検定は一見難しそうな検定なのですが、<mark>概念自体は非常に簡単。</mark>

具体的な例を挙げて見ていきましょう！

ある<mark>メールABの効果を確かめる</mark>ためにランダムに振り分けたセグメントに配信を行いました。結果は以下の通り。

<table class="table">
<tbody>
<tr>
<td></td>
<td>クリックしなかった数</td>
<td>クリックした数</td>
<td>配信数</td>
</tr>
<tr>
<td>メールA</td>
<td>1000</td>
<td>60</td>
<td>1060</td>
</tr>
<tr>
<td>メールB</td>
<td>400</td>
<td>40</td>
<td>440</td>
</tr>
<tr>
<td>合計</td>
<td>1400</td>
<td>100</td>
<td>1500</td>
</tr>
</tbody>
</table>

※クリック数はメールからURLをクリックしてWebサイトへ遷移した数と定義します。

「この時メールAとメールBで**どちらの方が良い**と言えるでしょうか？」

「それとも、**違いがあるとは言えない**のでしょうか？」

:::talk{who="umatan"}
うーーん、なんとなくメールBの方が良い気がするけど・・・
:::

ここで<mark>**カイ二乗検定の出番**</mark>になります。

## カイ二乗検定の計算方法

![カイ二乗検定](/wp-content/uploads/2022/11/2a5eb431e34d344565a954dc3238861f.jpg)

先ほどの例の場合、どのような計算を行ってカイ二乗検定の計算を行っていくのでしょうか？

簡単に見ていきます。そもそもABのメールに違いがなかったとしたらどうなるでしょう？

合計で1500通送ったうち100通がクリックされているわけですから、AもBも15分の1がクリックされることになるはず。

計算してみると・・・

Aは1060×(1/15)=**70.7**\
Bは440×(1/15)=**29.3**

でも実際のところは**Aが60通**で、**Bが40通**となっています。

これが<mark>たまたま誤差の範囲なのかそれとも決定的な違いがあるのかをカイ二乗検定により見ていく</mark>ことになるわけです。

この差を以下の式で計算します。

$$
\sum\frac{(期待値-実測値)^2}{期待値}
$$

すなわちこの場合は、クロス集計表の4セル全ての期待値を算出してそれぞれの実測値との値のズレの2乗を期待値で割ったものを全て足しあわせていきます。

$$
\frac{(70.7-60)^2}{70.7}+・・・
$$

結果は・・・5.88となりました。

この結果が**カイ二乗値**となり、カイ二乗値をもとにカイ二乗分布と照らしあわせてこの値が何％ほどで起こりうる値なのかを見てみます。

カイ二乗分布において自由度という指標が必要になるのですが、自由度は

$$
自由度=(行数-1)×(列数-1)
$$

で求めます。

今回は1になりますね！

**自由度1でカイ二乗値が5.88の場合はどのくらいの確率で起きうるものなのでしょうか？**

以下の[カイ二乗分布表](https://www.saiensu.co.jp/book_support/978-4-88384-140-0/chi-square_distribution.pdf)で確認してみましょう！

![カイ二乗分布表](/wp-content/uploads/2022/11/7015fe63b7454b1bb10c424dea72f653.png)

自由度1の時のカイ二乗分布の値は5％で3.84、1％で6.63となっています。

通常は5％有意もしくは1％有意を用いますが、この場合5.88は3.84を上回っていますが6.63より小さいので5％有意となります。

つまり<mark>AとBが同じ前提の時、この事象は5%以下の確率でしか起きないということになるのです。</mark>

:::talk{who="robotan"}
なるほど！そういうことなのか！カイ二乗検定の中身が理解できたよ！
:::

:::talk{who="umatan"}
実際にツールを使って検定を行うと意識しない部分にはなってしまうんだけど、知っておくと幅が広がるよ！
:::

有意差については以下の記事をご参照ください。

<https://toukei-lab.com/significant-difference>

## カイ二乗検定の注意点

カイ二乗検定によって有意差があるかどうかと検定しましたが、検定においては<mark>サンプルサイズの大きさが重要になってきます。</mark>

サンプルサイズが大きければ大きいほど少しの差で有意差を出しやすくなります。

例えば、先ほどの例でシンプルに全ての数値を約10％に縮小させてみましょう！

<table class="table">
<tbody>
<tr>
<td></td>
<td>クリックしなかった数</td>
<td>クリックした数</td>
<td>配信数</td>
</tr>
<tr>
<td>メールA</td>
<td>100</td>
<td>6</td>
<td>106</td>
</tr>
<tr>
<td>メールB</td>
<td>40</td>
<td>4</td>
<td>44</td>
</tr>
<tr>
<td>合計</td>
<td>140</td>
<td>10</td>
<td>150</td>
</tr>
</tbody>
</table>

この場合、カイ二乗値を計算すると0.588になります。

先ほどの5%点が3.84であり、<mark>それを下回っているので有意差があるとは言えません。</mark>

同じ比率であるので直感的には有意差がありそうだと思えるかもしれませんが、サンプルサイズが小さい時は信頼性が低く有意差ありと判定されないのです。

:::talk{who="robotan"}
え！？サンプルサイズが違うだけでこんなに違うものなの！？
:::

あるLPに対して集客するユーザーは一定数なので、<mark>その中で何個もテストパターンを作ってしまうと、その分サンプルがばらけて十分なサンプルが得られるまで有意差ありと判定されにくくなってしまいます。</mark>

なので、[ABテスト](/ab-test)など行ってカイ二乗検定で有意差を判定したい時は、ABテストのパターンを細かくしすぎないほうがよいでしょう！

検定に値する十分なボリュームのサンプルが取得できるかをしっかり前もって設計しておきましょう！

## カイ二乗検定をPythonで実装してみよう！

それでは続いてカイ二乗検定を**Pythonで実装**してみましょう！

```python
import pandas as pd
import numpy as np
import scipy as sp
from scipy import stats
```

```python
data = pd.DataFrame([[1000, 60], [400, 40]])
```

先ほどの例を使っていきたいので、このようにデータフレームを作成していきます。

続いて先ほど学んだようにそれぞれの期待値との差を以下のように計算していきカイ二乗値を算出していきます。

$$
\sum\frac{(期待値-実測値)^2}{期待値}
$$

```python
(60 - 1060/15)**2/(1060/15) + (1000 - 1060*14/15)**2/(1060*14/15) + (40 - 440/15)**2/(440/15) + (400 - 440*14/15)**2/(440*14/15)
```

結果は、5.880911541288903となりました。

この値を自由値1の[カイ二乗分布の有意水準5％の点](https://www.itl.nist.gov/div898/handbook/eda/section3/eda3674.htm)と比較してみると・・・

5.88 > 3.84となり、5％有意となりました！

![カイ二乗検定](/wp-content/uploads/2019/10/0ccfb50398fe16193fb9b0467df1f9ba.png)

今回は実際に計算をして求めてきましたが、Scipyを使えば以下のように簡単に記述して同様の結果を得ることも可能です。

```python
sp.stats.chi2_contingency(data, correction=False)
```

簡単ですね！

## カイ二乗検定　まとめ

カイ二乗検定についてまとめてきました。

カイ二乗検定は実務で活躍することの多い手法であり、<mark>簡単に実装できれば一目置かれること間違いなしです！</mark>

:::talk{who="umatan"}
ぜひ一度は自分の手で実装してみよう！
:::

ちなみにカイ二乗検定を実際に行うWebアプリケーションをPythonで作る方法を以下の記事でまとめていますのでよければご覧ください！

<https://toukei-lab.com/python-flask>

検定は統計学の基本のキでありながら奥が深くしっかり理解しておく必要があります。

検定まわりのお話は以下の書籍がオススメです。是非目を通してみてください！

**■入門　統計解析法**

::product[入門 統計解析法]{url="https://af.moshimo.com/af/c/click?a_id=860485&p_id=170&pc_id=185&pl_id=4062&s_v=b5Rz2P0601xu&url=http%3A%2F%2Fwww.amazon.co.jp%2Fexec%2Fobidos%2FASIN%2F4817102667%2Fref%3Dnosim" image="https://images-fe.ssl-images-amazon.com/images/I/41uG1I4bMmL._SL160_.jpg" amazon="https://af.moshimo.com/af/c/click?a_id=860485&p_id=170&pc_id=185&pl_id=4062&s_v=b5Rz2P0601xu&url=http%3A%2F%2Fwww.amazon.co.jp%2Fgp%2Fsearch%3Fkeywords%3D%25E5%2585%25A5%25E9%2596%2580%25E7%25B5%25B1%25E8%25A8%2588%25E8%25A7%25A3%25E6%259E%2590%25E6%25B3%2595%26__mk_ja_JP%3D%25E3%2582%25AB%25E3%2582%25BF%25E3%2582%25AB%25E3%2583%258A" rakuten="https://af.moshimo.com/af/c/click?a_id=858168&p_id=54&pc_id=54&pl_id=616&s_v=b5Rz2P0601xu&url=http%3A%2F%2Fsearch.rakuten.co.jp%2Fsearch%2Fmall%2F%25E5%2585%25A5%25E9%2596%2580%25E7%25B5%25B1%25E8%25A8%2588%25E8%25A7%25A3%25E6%259E%2590%25E6%25B3%2595%2F-%2Ff.1-p.1-s.1-sf.0-st.A-v.2%3Fx%3D0" detail="永田 靖 日科技連出版社 1992-04-01"}

統計学の基本を理解するのにうってつけの本です。基本的に高校レベルの数学ができれば問題なく理解できるレベル。大学生１～２年生の時に非常にお世話になりました。

**■統計学入門（基礎統計学）**

::product[統計学入門 (基礎統計学Ⅰ)]{url="https://af.moshimo.com/af/c/click?a_id=860485&p_id=170&pc_id=185&pl_id=4062&s_v=b5Rz2P0601xu&url=http%3A%2F%2Fwww.amazon.co.jp%2Fexec%2Fobidos%2FASIN%2F4130420658%2Fref%3Dnosim" image="https://images-fe.ssl-images-amazon.com/images/I/512H1E9ARDL._SL160_.jpg" amazon="https://af.moshimo.com/af/c/click?a_id=860485&p_id=170&pc_id=185&pl_id=4062&s_v=b5Rz2P0601xu&url=http%3A%2F%2Fwww.amazon.co.jp%2Fgp%2Fsearch%3Fkeywords%3D%25E7%25B5%25B1%25E8%25A8%2588%25E5%25AD%25A6%25E5%2585%25A5%25E9%2596%2580%25EF%25BC%2588%25E5%259F%25BA%25E7%25A4%258E%25E7%25B5%25B1%25E8%25A8%2588%25E5%25AD%25A6%25EF%25BC%2589%26__mk_ja_JP%3D%25E3%2582%25AB%25E3%2582%25BF%25E3%2582%25AB%25E3%2583%258A" rakuten="https://af.moshimo.com/af/c/click?a_id=858168&p_id=54&pc_id=54&pl_id=616&s_v=b5Rz2P0601xu&url=http%3A%2F%2Fsearch.rakuten.co.jp%2Fsearch%2Fmall%2F%25E7%25B5%25B1%25E8%25A8%2588%25E5%25AD%25A6%25E5%2585%25A5%25E9%2596%2580%25EF%25BC%2588%25E5%259F%25BA%25E7%25A4%258E%25E7%25B5%25B1%25E8%25A8%2588%25E5%25AD%25A6%25EF%25BC%2589%2F-%2Ff.1-p.1-s.1-sf.0-st.A-v.2%3Fx%3D0" detail="東京大学教養学部統計学教室 東京大学出版会 1991-07-09"}

東大出版から出ている名著です。

赤本と呼ばれ慣れ親しまれています。レベル的には中級者～上級者で、1冊持っておくと、なにかと便利な1冊です。

カイ二乗検定を理解して実装してみて統計学の門をたたきましょう！

カイ二乗検定以外にもいくつかの統計的検定があります。統計的検定については以下の記事で詳しくまとめていますので是非ご覧ください。

<https://toukei-lab.com/%e6%a4%9c%e5%ae%9a>

統計学、機械学習、データサイエンスについて詳しく学びたい方は以下の記事をチェックしてみてください！

<https://toukei-lab.com/statistics-freshman>

<https://toukei-lab.com/machine-learning-study>

<https://toukei-lab.com/data-scientist>

またデータサイエンティストになるための勉強がしたい！という方は当サイト「スタビジ」が提供する[スタビジアカデミー](https://toukei-lab.com/achademy/)というサービスで体系的に学ぶことが可能ですので是非参考にしてみてください！

:::box
[**業界最安級のAIデータサイエンス特化スクール：スタアカ（スタビジアカデミー）**](https://toukei-lab.com/achademy/)
:::