コンテンツにスキップ

高等学校数学B/確率分布と統計的な推測

出典: フリー教科書『ウィキブックス(Wikibooks)』
高等学校数学 > 高等学校数学B > 高等学校数学B/確率分布と統計的な推測

本項は高等学校数学Bの「確率分布と統計的な推測」の解説です。

この分野は数学Iのデータの分析、数学Aの確率と関連があります。

同じく数学Bの数列、数学Ⅱの微分・積分の考えを既習であるものとします。また、この分野を学習後に同じく数学Bの数学と社会生活で扱うデータ解析の内容も参照することを推奨します。

kは自然数で1≤k≤nを満たすものとします。


確率分布

[編集]

確率分布

[編集]
確率変数と確率分布

試行の結果によってどの値をとるか定まり、とり得る値の各々に対してその値をとる確率が定まるような変数を確率変数と呼ぶ。

確率変数Xのとり得る値がx1,x2,⋯,xnであるとき、Xが値xkをとる確率 をP(X=xk)、a≤xk≤bである確率 P(a≤X≤b)のように表す。

P(X=xk)をpkと表すこととすると、xkとpkの対応関係は以下のようになる。

X
x1
x2
⋯
⋯
xn
計
P
p1
p2
⋯
⋯
pn
1

この対応関係をXの確率分布あるいは単に分布と呼び、確率変数Xはこの分布に従うという。

このとき、常にpk≥0であり、∑k=1npk=1である。


期待値と分散

Xの確率分布が以下の表であるとする。

X
x1
x2
⋯
⋯
xn
計
P
p1
p2
⋯
⋯
pn
1

このとき、∑k=1nxkpkをXの期待値と呼び、E(X)またはmまたはμで表す(μはギリシャ文字で、アルファベットのmに対応する文字である)。

次に、確率変数(X−m)2を考える。この確率変数の期待値をXの分散と呼び、V(X)で表すこととする(Vは「分散」の英語「Variance」の略。Var(X)と書く場合もある)。

このとき、期待値の定義からV(X)=E{(X−m)2}=∑k=1n(xk−m)2pkであり、V(X)の単位は測定単位の二乗(例えばXの単位がcmならV(X)の単位はcm2)である。そこで、V(X)をXの標準偏差と呼び、σ(X)で表すこととする(σはΣの小文字である)。

分散を表す式を変形すると、

V(X)=∑k=1n(xk−m)2pk

=∑k=1n(xk2−2mxk+m2)pk

=∑k=1nxk2pk−2m∑k=1nxkpk+m2∑k=1npk

=∑k=1nxk2pk−2m⋅m+m2⋅1

=∑k=1nxk2pk−m2

となり、∑k=1nxk2pkは確率変数X2の期待値に等しいのでV(X)=E(X2)−{E(X)}2が成り立つ。


今までの事項を纏めると以下のようになる。

Xの期待値:E(X)=m=μ=∑k=1nxkpk
Xの分散:V(X)=E{(X−m)2}=E(X2)−{E(X)}2
Xの標準偏差:σ(X)=V(X)


確率変数Xの期待値・分散・標準偏差のことをそれぞれXの分布の平均・分散・標準偏差とも呼ぶ。標準偏差は分布の平均を中心としてxkの散らばる傾向の程度を表しており、標準偏差の値が小さいほどxkは分布の平均の近傍に集中する。


なお、分散と標準偏差を纏めて散布度、代表値と合わせて分布の特性値と呼ぶ。


サンクトペテルブルクのパラドックス
次のようなゲームを考える。
「公正なコイン1枚を表が出るまで繰り返し投げ、表が出たら終了する。コインを投げた回数をnとするとき、2n−1円の賞金がもらえる。」
n回目に表が出る確率をpn、賞金をXnとおくと、Xnは確率変数であり、pn=(12)n−1⋅12=(12)n,Xn=2n−1なので、裏が出続けたときのこのゲームの期待値は∑k=1∞pkXk=∑k=1∞(12)k2k−1=∑k=1∞(12)k−k+1=∑k=1∞12=∞(円)となり、参加費がいくらであってもこのゲームに参加した方が良いと考えられる。この結論は本当に正しいのだろうか?
参加費を一万円と設定すると、参加費よりも大きい賞金が得られる確率は14回以上連続で裏が出る場合で、(12)14≒0.006%以下と非常に小さい。主催者の立場になると、現実的に大きな金額を支払うことはできないので、賞金に上限を設定する必要がある。例えば、20回まで裏が出続けた場合はそこで打ち切りとし、220=1048576すなわち約105万円を上限とする。このときの期待値は∑k=120pkXk+(12)20⋅220=202+1=11(円)となる。上限を設定した途端、期待値は∞から十数円程度に変わってしまった。
現実的に考えると期待値は十数円程度に収まることがわかったが、「主催者が資金を無限に持っている」という前提で思考実験したときについては解決していない。この場合については、対数で定義される「効用」という概念を用いてこのパラドックスを回避する方法が見つかっている。
この話題からは、「あらかじめゲームを何回繰り返すかを決めておけば、比較的公平な賭け金を設定できる」ということがわかる。逆に、「賭け金が公平かどうか確かめる」ことも同様にできる。


確率変数の変換

Xの確率分布が以下の表であるとする。

X
x1
x2
⋯
⋯
xn
計
P
p1
p2
⋯
⋯
pn
1

a,bを定数とすると、一次式Y=aX+bで定められるYも確率変数となり、そのとる値はyk=axk+bとなる。よってYの確率分布は以下の表のようになる。

Y
y1
y2
⋯
⋯
yn
計
P
p1
p2
⋯
⋯
pn
1

確率変数Xに対して上のようなYを考えることを確率変数の変換と呼ぶ。

Yの期待値・分散・標準偏差は以下のようになる。 E(Y)=∑k=1nykpk=∑k=1n(axk+b)pk=a∑k=1nxkpk+b∑k=1npk=aE(X)+b

V(Y)=∑k=1n{yk−E(Y)}2pk=a2∑k=1n{xk−E(X)}2pk=a2V(X) ∵yk−E(Y)=axk+b−{aE(X)+b}=a{xk−E(X)}

σ(Y)=V(Y)=|a|V(X)=|a|σ(X)

同時分布

[編集]

確率変数X,Y,Z,⋯と実数a,b,c,⋯に対しX=a,Y=b,Z=c,⋯が同時に成り立つ確率をP(X=a,Y=b,Z=c,⋯)のように表すこととする。

2つの確率変数X,Yについてとりうる値がそれぞれx1,x2,⋯,xn、y1,y2,⋯,ymであるとする。P(X=xi,Y=yj)=rijとおいたとき、以下の表のように全てのi,jの組み合わせにおいて(xi,yj)とpijとの対応が得られる。

X\Y
y1
y2
⋯
⋯
⋯
ym
計
x1
r11
r12
⋯
⋯
⋯
r1m
p1
x2
r21
r22
⋯
⋯
⋯
r2m
p2
⋮
⋮
⋮
⋱
⋱
⋱
⋮
⋮
⋮
⋮
⋮
⋱
⋱
⋱
⋮
⋮
⋮
⋮
⋮
⋱
⋱
⋱
⋮
⋮
xn
rn1
rn2
⋯
⋯
⋯
rnm
pn
計
q1
q2
⋯
⋯
⋯
qm
1

このような対応をXとYの同時分布という。

各i,jについて、それぞれP(X=xi)=∑j=1mrij=pi,P(Y=yj)=∑i=1nrij=qjが成り立つので、X,Yの確率分布はそれぞれ以下のようになる。

X
x1
x2
⋯
⋯
xn
計
P
p1
p2
⋯
⋯
pn
1
Y
y1
y2
⋯
⋯
ym
計
P
q1
q2
⋯
⋯
qm
1


確率変数の和の期待値

2つの確率変数X,Yについて、和X+Yもまた確率変数であり、同時分布表と確率変数変換の等式から、確率変数の和の期待値についてE(X+Y)=E(X)+E(Y)、E(aX+bY)=aE(X)+bE(Y)が成り立つことがわかる。これは確率変数が3つ以上であっても同様に成り立つ。


事象の独立・従属

一般に2つの事象A,BにおいてPA(B)=P(B)が成り立つとき、事象Aが起こることは事象Bの起こる確率に無関係である。これを事象Aは事象Bに独立であるという。このとき、確率の乗法定理によりP(A∩B)=P(A)P(B)が成り立つ。この式はPB(A)=P(A)と同値であるため、事象Bが起こることも事象Aの起こる確率に無関係、つまり事象Bは事象Aに独立であると言える。よって、P(A∩B)=P(A)P(B)が成り立つとき、2つの事象A,Bは互いに独立である。独立でない場合は2つの事象A,Bは従属であるという。なお、事象A,Bの独立・従属と対応する確率変数X,Yの独立・従属は一致する。


確率変数の積の期待値

2つの確率変数X,Yについて、積XYもまた確率変数である。X,Yが互いに独立なとき、同時分布表より確率変数の積の期待値は以下のように計算される。

E(XY)=∑i=1n∑j=1m(xiyj)(piqj)=∑i=1nxipi⋅∑j=1myjqj=E(X)E(Y)

これは3つ以上の確率変数においても互いに独立ならば成立する。


確率変数の和の分散

確率変数X+Yの分散について考える。

V(X+Y)=E{(X+Y)2}−{E(X+Y)}2

=E(X2+2XY+Y2)−{E(X)+E(Y)}2

=E(X2)+2E(XY)+E(Y2)−{E(X)}2−2E(X)E(Y)−{E(Y)}2

このとき、確率変数X,Yが互いに独立ならばE(XY)=E(X)E(Y)を用いることで、

上式=E(X2)+E(Y2)−{E(X)}2−{E(Y)}2

=[E(X2)−{E(X)}2]+[E(Y2)−{E(Y)}2]

=V(X)+V(Y)と変形できる。

同様に、確率変数変換の等式より確率変数X,Yが互いに独立ならばV(aX+bY)=a2V(X)+b2V(Y)が成り立つ。

これらは3つ以上の確率変数においても互いに独立ならば成立する。


確率変数の積の分散(発展)

確率変数XYの分散について考える。

分散の性質よりV(XY)=E(X2Y2)−{E(X)}2{E(Y)}2と変形できる。

X,Yが互いに独立ならばX2,Y2も互いに独立であるので、E(X2Y2)=E(X2)E(Y2)が成り立つ。

よってV(XY)=E(X2)E(Y2)−E(X)2E(Y)2となる。

ここで分散の性質より上式は[V(X)+{E(X)}2][V(Y)+{E(Y)}2]−{E(X)}2{E(Y)}2と変形できるので、

展開してV(XY)=V(X)V(Y)+{E(X)}2V(Y)+{E(Y)}2V(X)となる。

これは3つ以上の確率変数においても互いに独立ならば成立する。


なお、上記で紹介した確率変数の和の分散、確率変数の積の期待値・分散については、確率変数が従属である場合には確率変数のとる値を用いて直接計算する必要がある。


共分散と分散

数学Iで扱ったように、データ系列x, yについて、xの偏差とyの偏差の積の平均値を共分散と呼び、Sxyで表した。

確率変数X,Yに対して共分散はCov[X,Y]と書かれる(「Cov」は「共分散」の英語「Covariance」の略)。


共分散の定義式を先述の期待値の性質を用いて変形する。

Cov[X,Y]=E[{X−E(X)}{Y−E(Y)}]
=E{XY−YE(X)−XE(Y)+E(X)E(Y)}
=E(XY)−E{YE(X)}−E{XE(Y)}+E{E(X)E(Y)}(∵和の期待値は期待値の和)
=E(XY)−E(X)E(Y)−E(Y)E(X)+E(X)E(Y)(∵定数倍は期待値の外に出せる・定数の期待値はその定数そのもの)
=E(XY)−E(X)E(Y)

つまり、共分散は「(期待値の積)-(積の期待値)」で容易に求まる。


ここでY=Xを代入すると、共分散の定義式はE[{X−E(X)}2]、上で求めた式はE(X2)−{E(X)}2と、いづれの場合もXの分散V(X)に一致する。

すなわち、共分散は分散を拡張した概念であるといえる。


共分散を用いると、独立でない場合の確率変数の積の期待値・和の分散を表すことができる。

E(XY)=E(X)E(Y)+Cov[X,Y](※上で求めた共分散と期待値の関係より)
V(X±Y)=V(X)±2Cov[X,Y]+V(Y)(※定義通りE([{X−E(X)}±{Y−E(Y)}]2)を計算すれば求まる)

二項分布

[編集]

確率pでAかBかの2通りの結果をとる試行(ベルヌーイ試行)を独立にn回繰り返したとき、Aが起こる回数Xの確率分布は反復試行の確率より以下のようになる。ただし、0<p<1,q=1−pである。

X
0
1
⋯
⋯
r
⋯
⋯
n
計
P
nC0qn
nC1pqn−1
⋯
⋯
nCrprqn−r
⋯
⋯
nCnpn
1

表の確率は二項定理の展開式の各項と一致している。 このような分布のことを二項分布と呼び、B(n,p)のように書く。確率変数Xが二項分布B(n,p)に従うことをX∼B(n,p)と表す。


事象Aの起こる確率がpである試行を独立にn回行うとき、第k回目の試行で事象Aが起これば1、起こらなければ0の値をとる確率変数をXkとおく。

このとき、Xkは以下のような確率分布に従う。

Xk
1
0
計
P
p
q
1

このような確率分布をベルヌーイ分布(0-1分布)という。

ベルヌーイ分布の

期待値は定義よりE(Xk)=1⋅p+0⋅q=pである。
分散はE(Xk2)=12⋅p+02⋅q=pよりV(Xk)=E(Xk2)−{E(X)}2=p−p2=p(1−p)=pqである。

X=∑k=1nXkとおくと、確率変数Xはn回の反復試行において事象Aが起こる回数であるから、X∼B(n,p)である。

よって、確率変数の和の期待値・分散を求める公式を用いて、

E(X)=E(∑k=1nXk)=∑k=1nE(Xk)=∑k=1np=np

V(X)=V(∑k=1nXk)=∑k=1nV(Xk)=∑k=1npq=npq

である。

纏めると、以下のようになる。

X∼B(n,p)のとき、

E(X)=np、V(X)=npq、σ(X)=npq

ただし、q=1−p


負の二項分布
成功確率がpであるベルヌーイ試行を独立に繰り返すとき、k回成功するまでの失敗回数Xが従う確率分布を負の二項分布と呼ぶ。
n回成功するまでの失敗回数をr、q=1−pとすると、重複組合せを用いてP(X=r)=nHrpnqrと計算できる。
このとき、E(X)=nqp,V(X)=nqp2が成り立つ。
負の二項分布を「a回成功するまでの試行回数X」で定義することもある。
この場合、a回成功するまでにb回試行する確率はP(X=a)=a−1Cb−1paqa−bと計算でき、E(X)=ap,V(X)=aqpが成り立つ。


正規分布

[編集]
連続型確率変数

度数分布表で表された、ある変量Xについてのデータがある。このとき、Xが階級値をとる確率はその階級の相対度数であると考えて良い。つまり、Xは階級値の値をとる確率変数であり、その分布は相対度数の分布と一致する。この確率分布を図示するには、各階級の上の長方形の面積がその階級の相対度数を表すようなヒストグラムを書けば良い。

データの大きさを増し、階級の幅も狭くしていくと、ヒストグラムの形は一つの曲線に近づいていく。そこで、連続的な値をとる確率変数Xに対し、a≤X≤bとなる確率がyーxグラフ上の曲線y=f(x)と直線x=a,x=bとx軸で囲まれた領域の面積で表されるように一つの曲線を対応させる。このような曲線をXの分布曲線という。

連続的な値をとる確率変数を連続型確率変数といい、f(x)を確率密度関数と呼ぶ。なお、f(x)の定義域は実数全体のことも、その一部分のこともある。今まで扱ってきたような、飛び飛びの値をとる確率変数は離散型確率変数と呼ぶ。なお、離散型確率変数に対してf(k)=P(X=k)を満たす関数f(k)を確率質量関数という。

確率密度関数の性質

常にf(x)≥0
P(a≤X≤b)=∫abf(x)dx※
Xのとる値の範囲がα≤X≤βのとき、∫αβf(x)dx=1

※b=aの場合はP(X=a)=∫aaf(x)dx=0である。これは、定性的には「とり得る値が無限個あるうちからある1つの定数に定まる確率は0」と説明される。

以下、特に断りがない場合、確率変数は連続型であるとする。


確率変数Xのとる値の範囲がα≤X≤βでその確率密度関数がf(x)であるとき、期待値・分散・標準偏差は定積分を用いて以下のように定義される。

E(X)=m=∫αβxf(x)dx

V(X)=∫αβ(x−m)2f(x)dx

σ(X)=V(X)

これはα=−∞,β=∞の場合も含む。

離散型確率変数の期待値・分散の公式と比べると、∑k=1nを∫αβに、xkをxに、pkをf(x)に置き換えただけで同じ形をしていることがわかる。


累積分布関数(発展)

確率密度関数のグラフを直線x=uで区切った左側の面積をF(u)と置くと、F(u)はxがu以下の値を取る確率(累積確率)に一致する。このとき、F(x)を累積分布関数または確率分布関数と呼ぶ。その定義より、累積分布関数と確率密度関数の間にはF(x)=∫−∞xf(t)dt⟺f(x)=F′(x)という関係がある。つまり、確率密度関数のx=uにおける値f(u)は累積分布関数F(x)のx=uにおける微分係数である。実際には累積分布関数が微分不可能な場合があるため、累積分布関数を確率密度関数の原始関数として定義することが多い。


正規分布

確率変数Xが実数mと正の実数σを用いて表される関数f(x)=12πσe−(x−m)22σ2を確率密度関数に持つとき、このXの分布を正規分布またはガウス分布と呼び、N(m,σ2)のように表す。また、曲線y=f(x)を正規分布曲線と呼ぶ。ここでは、確率変数Xが正規分布N(m,σ2)に従うことをX∼N(m,σ2)と表すこととする。

X∼N(m,σ2)のとき、m=E(X),σ=σ(X)が成り立つ。証明は数Ⅲレベルの積分の知識が必要なため省略する。なお、e=2.71828⋯は「ネイピア数」と呼ばれる無理数である。詳しくは数学Ⅲの微分で扱う。

また、以下のような性質がある。

正規分布の性質

平均値と最頻値と中央値が一致する

曲線は直線x=mに関して対称で、f(x)はx=mで最大値をとる。

x軸を漸近線とする

標準偏差の値の大小と曲線の山の高低が対応している。

正規分布は連続型確率変数の分布の代表例である。身の周りの現象の中には、観測される変量の分布が正規分布に近いものが多くあり、正規分布を有効に利用することができる。最も有名な例を出すと、偏差値の導出に利用されている。


標準正規分布

正規分布のうち、特にN(0,1)を標準正規分布と呼ぶ。

X∼N(m,σ2)のとき、Y=aX+bとするとY∼N(am+b,a2σ2)であることが知られている。そこでZ=X−mσとするとZ∼N(0,1)であり※、f(z)=12πe−z2nが成り立つ。

このように、正規分布に従うある確率変数を標準正規分布に従う確率変数に変換することを、標準化と呼ぶ。

※どのような確率分布であっても、Z=X−E(E)σ(X)とおけばE(Z)=0,V(Z)=1が成り立つことが知られている。これを標準化公式という。正規分布の場合はY=aX+bというアフィン変換に対して分布の種類を変えないので「標準化後も正規分布」と言うことができる。


標準正規分布に従う確率変数ZにおいてP(0≤Z≤u)=p(u)としたとき、p(u)がとる値を纏めた表を(標準)正規分布表と呼ぶ。正規分布を利用する際には必須になる表であり、大学入試においても問題冊子の最後の方に載せられていることが多い。本書の最終項に載せているので、演習問題を解くときに利用すると良い。

一般の分布であっても、応用上は分布表の値を参照するかエクセル等に計算させる場合が殆どである。


標準正規分布における確率について、次の等式が成り立つ。

P(−u≤Z≤0)=P(0≤Z≤u)=p(u)
P(−u≤Z≤u)=2p(u)
P(Z≤0)=P(Z≥0)=0.5


なお、正規分布表の値は累積密度関数F(x)=1+erf(x−m2σ)2のx=uにおける微分係数である。ここでerf(x)は誤差関数と呼ばれる特殊関数で、erf(x)=2π∫0xe−t2dtで定義される。


正規分布から構成される確率分布としてt分布、χ2分布、F分布の3つが存在する。他によく用いられる分布として、一様分布とポアソン分布が存在する。ベルヌーイ分布は一様分布の特別な場合である。詳しくは理数数学で解説する。


正規化

二項分布B(n,p)に従う確率変数Xについて、X=rとなる確率をnを大きくしながら計算し、そのグラフを書くと、次第にグラフが左右対称になっていくことがわかる。 そこで、二項分布を正規分布で近似することを考える。

二項分布の正規分布による近似

nが十分大きいとき、X∼B(n,p)ならば近似的にX∼N(np,npq)である。

一般に、ある確率分布に従う変数を正規分布に従う変数に近似する変換を正規化あるいは正規近似と呼ぶ。

二項分布に従う確率変数を正規化した後、さらに標準化することで正規分布表を活用することができる。先ほどの標準化の式にm=np,σ=npqを代入するだけなので、そこまで手間はかからない。

なお、二項分布においてはベルヌーイ試行の確率pが0.5に近ければ近いほど正規近似の精度が上がることが知られている。


二項分布のn→∞の極限を考えると、正規分布に分布収束することが知られている。これはド・モアブル=ラプラスの定理(或いは中心極限定理)によって示される。


半整数補正
X∼B(16,0.5)とするとm=16⋅0.5=8,σ=16⋅0.5⋅(1−0.5)=2である。
ここで、整数r(1≤r≤16)に対しP(X=r)がrを底辺の中心とする幅1の長方形の面積で表されるようなrーPグラフを考える。
このグラフにY∼N(8,22)の確率密度関数のグラフを重ねると、例えばP=P(6≤X≤10)についてP≒P(5.5≤Y≤10.5)であることがわかる。
Z=Y−82とおくとZ∼N(0,1)であるからP≒P(−1.25≤Z≤1.25)=2p(1.25)=0.78870
二項分布から直接求めると(0.5)16⋅∑k=61016Ck=0.78988⋯であり、高い精度で近似できることがわかる。
このように、m,σについて0.5だけ摺(ず)らして置き換えることを半整数補正と呼ぶ。
なお、半整数補正を行わないで計算すると、P≒P(6≤Y≤10)=P(−1≤Z≤1)=2p(1)=0.68269となり、近似値が小さくなる。
np,nqがともに5より大きいならば、半整数補正により実用上十分な精度で近似値を確保することができる。半整数補正を行わない場合はnp,nqともにかなり大きくないと良い精度にならない。

統計的な推測

[編集]

標本調査

[編集]

調べたい対象全体のデータを集める調査を全数調査と呼ぶ。国勢調査などがこれにあたる。全数調査は対象が厖大な場合に多くの労力・時間・費用を必要とする。また、工場等においては調査によって製品が傷つく場合(耐久試験など)には好ましくない。このような場合、対象全体から一部を抜き出して調べ、その結果から全体の状況を推測する調査を行う。このような調査を標本調査と呼ぶ。

標本調査における調べたい対象全体の集合を母集団、調査のために母集団から抜き出された要素の集合を標本と呼び、母集団から標本を抜き出すことを標本の抽出と呼ぶ。また、母集団の要素の個数を母集団の大きさ、標本の要素の個数を標本の大きさと呼ぶ。なお、ここでの「母」は「そこから何かを生じさせるもとになるもの」を意味する(「酵母」、「母校」等と同じ用法)。

標本調査では標本を母集団の正しい縮図にするために、標本が特別な属性を持つものに偏らないようにする必要がある。母集団の各要素を等しい確率で抽出することを無作為抽出と呼び、無作為抽出で選ばれた標本を無作為標本と呼ぶ。無作為抽出では乱数賽や乱数表などが用いられることがある。詳しくは「w:乱数生成」を参照。

全ての要素を母集団全体から無作為抽出することは容易ではないため、層化抽出法、クラスター抽出法、多段抽出法などさまざまな抽出方法が編み出されており、それぞれに長所・短所が存在する。


母集団分布

母集団に属する要素についてのデータをある変量の値の集合と考えることで、 ここまで扱ってきたような統計的手法が使える。

大きさNの母集団において、変量xのとる値と要素の個数をそれぞれx1x2⋯xn,f1f2⋯fnと置く。 このとき、変量xの度数分布表は以下のようになる。

階級値
x1x2⋯⋯xn
計
度数
f1f2⋯⋯fn
N


また、変量xの平均μと標準偏差σは以下のように求められる。

μ=1N∑k=1nxkfk=∑k=1nxkfkN

σ=1N∑k=1n(xk−μ)2fk=∑k=1n(xk−μ)2fkN


この母集団から大きさn=1で無作為抽出するとき、その要素における変量xの値Xは偶然に支配されるが、X=xkとなる確率pkはpk=fkNで与えられる。

よってXは以下のような確率分布を持つ確率変数と考えられる。

X
x1x2⋯⋯xn
計
P
f1Nf2N⋯⋯fnN
N

この確率分布は母集団の相対度数の分布と一致する※。

※このことから、度数分布に於いて相加平均の式で求めたE(X)と期待値の式で求めたE(X)が常に一致することがわかる。則ち期待値は相加平均の拡張であり、期待値を平均とも呼ぶのはこれが由来である。

一般に、母集団における変量xの分布を母集団分布、その平均値を母平均、分散を母分散、標準偏差を母標準偏差と呼ぶ。 上の確率分布から、大きさ1の無作為標本における変量xの値Xと母平均μ、母分散σ2、母標準偏差σについて、E(X)=μ,V(X)=σ2,σ(X)=σが成り立つ。

実際の統計では母集団の大きさが非常に大きく、母集団分布は度数分布と同様に連続型確率変数の分布として近似される。そこで、正規分布に近似することで具合が良くなる場合が多い。


復元抽出

母集団から標本を抽出するのに、毎回元に戻しながら次のものを取り出す抽出を復元抽出と呼ぶ。逆に、取り出したものを戻さずに続けて抽出することを非復元抽出と呼ぶ。

大きさnの標本の要素における変量xの値をX1,X2⋯Xnと置く。標本が復元抽出によるものならば、母集団から大きさ1の標本を無作為抽出することをn回繰り返す反復試行であるから、Xkはそれぞれが母集団分布に従う互いに独立な確率変数となる。非復元抽出の場合でも、母集団の大きさNが標本の大きさnより十分大きい(N>>n)場合には近似的に復元抽出による標本と見なすことができる。


標本平均

大きさnの標本について、X‾=1n∑k=1nXkを標本平均、S2=1n∑k=1n(Xk−X‾)2を標本分散、S=1n∑k=1n(Xk−X‾)2を標本標準偏差と呼ぶ。

Xkは「母集団から標本を抽出する」という試行の結果で値が定まる確率変数なので、X‾,S2,Sも同様の試行の結果で値が定まる確率変数である。

復元抽出の場合、確率変数の値Xkは大きさ1の標本の確率変数と見なすことができ、それぞれ母集団分布に従うので、E(Xk)=μ,V(Xk)=σ2,σ(Xk)=σが成り立つ。

Xkはそれぞれ互いに独立なので、確率変数の和の期待値・分散を求める公式より E(X‾)=E(1n∑k=1nXk)=1n∑k=1nE(Xk)=1n⋅nμ=μ

V(X‾)=V(1n∑k=1nXk)=1n2∑k=1nV(Xk)=1n2⋅nσ2=σ2n

σ(X‾)=V(X‾)=σn

非復元抽出の場合もN>>nならば同様である。


標本比率

母集団全体の中である特性Aを持つ要素の割合を特性Aの母比率、標本の中で特性Aを持つ要素の割合を特性Aの標本比率と呼ぶ。

特性Aの母比率がpである十分大きな母集団から、大きさがnの標本を無作為抽出するとき、標本の中で特性Aを持つ要素の個数をTとおくと、T∼B(n,p)である。ここで、q=1−pとして正規化すると、近似的にT∼N(np,npq)である。

特性Aの標本比率をRとおくと、R=TnよりRは確率変数であり、 E(R)=1nE(T)=1n⋅np=p

V(R)=1n2E(T)=1n2⋅npq=pqn

であるので、近似的にR∼N(p,pqn)である。


特性Aの母比率がpである母集団において、特性Aを持つ要素を1、持たない要素を0で表す変量xを考える。このとき、Xkはそれぞれ1または0である。特性Aの標本比率Rはこれらのうち値が1であるものの割合であるから、R=1n∑k=1nXk=X‾が成り立つ。よって、標本比率は標本平均の特別な場合である。

一般に、標本平均X‾について以下の法則が成り立つ。

標本平均の分布

標本の大きさnが大きいとき、近似的にX‾∼N(μ,σ2n)である。

母集団分布が正規分布のとき、常にX‾∼N(μ,σ2n)である。


大数 (たいすう) の法則

標本標準偏差について、limn→∞σ(X‾)=limn→∞σn=0より、nが大きくなるとX‾は母平均μの近くに集中して分布する。すなわち、X‾がμに近い値をとる確率をpとすると、limn→∞p=1である。

limn→∞は「nを限りなく大きくする」という意味の記号である。詳しくはこちらを参照。

したがって、以下が成り立つ。

大数の法則

大きさnの無作為標本の標本平均X‾はnが大きくなるにつれて母平均μに近づく。

区間推定

[編集]
母平均の推定

母集団が大きいとき、母平均を求めるには時間も労力も相当にかかる。そこで、標本平均から母平均を推定することを考える。

標本の大きさnが大きいとき、近似的にX‾∼N(μ,σ2n)であるのは先程学んだ。X‾の標準化を考えてZ=X‾−μσnとおくと、近似的にZ∼N(0,1)である。

ここで正規分布表よりP(|Z|≤1.96)≒0.95なので、

P(μ−1.96⋅σn≤X‾≤μ+1.96⋅σn)≒0.95

すなわちP(X‾−1.96⋅σn≤μ≤X‾+1.96⋅σn)≒0.95である。


この式は区間X‾−1.96⋅σn≤x≤X‾+1.96⋅σnが値μを含むことが約95%の確実さで期待できることを示している。


この区間を母平均μに対する信頼度95%の信頼区間と呼び、[X‾−1.96⋅σn,X‾+1.96⋅σn]のように表す。


母平均μに対して信頼度95%の信頼区間を求めることを、「母平均μを信頼度95%で区間推定する」という。


信頼度95%とは、大きさnの無作為抽出を繰り返し、得られたそれぞれの標本平均に対し区間推定をして信頼区間を多数作ると、母平均μの含まれる区間が95%の割合で現れることが期待できることを指している。


信頼度99%で推定する場合、正規分布表よりP(|Z|≤2.58)≒0.99なので、信頼区間は[X‾−2.58⋅σn,X‾+2.58⋅σn]となる。

なお、実際の統計では母標準偏差σがわからない場合が多いので、nが大きいときは代わりに標本標準偏差Sを用いて良い。


母比率の推定

母平均と同様、標本比率Rから母比率pを区間推定することもできる。

標本の大きさnが大きいとき、先ほど学んだようにR∼N(p,pqn)である。したがって、母平均の推定の場合と同様に考えてP(R−1.96pqn≤p≤R+1.96pqn)≒0.95である。

q=1−pであり、大数の法則よりnが大きいときpはRと見做して良いから、Q=1−Rとおくと、母比率pに対する信頼度95%の信頼区間は[R−1.96RQn,R+1.96RQn]である。


信頼度99%で推定する場合、標本平均の場合と同様に考えて信頼区間は[R−2.58RQn,R+2.58RQn]となる。


Xkのとる値は1または0であるから、Xk2=Xkである。ここでR=X‾を用いると、標本分散S2について以下のように変形できる。

S2=1n∑k=1n(Xk−X‾)2

=1n∑k=1n(Xk2−2XkX‾+X2‾)

=1n∑k=1nXk2−2n⋅nX‾⋅∑k=1nXk+X2‾

=1n∑k=1nXk−2X2‾+X2‾

=X‾−X2‾

=R−R2

=R(1−R)

先ほど母標準偏差pq(q=1−p)を確率変数RQ(Q=1−R)で置き換えたが、上式よりRQ=Sなので、この置き換えは母平均の推定で行なった「母標準偏差σを標本標準偏差Sで置き換える」ことの特別な場合である。


ここでは信頼区間を大括弧[]で表したが、実は一般に区間a≤x≤bは「閉区間」と呼ばれ、[a,b]で表される。詳しくは数学Ⅲの極限で扱う。


なお、ある区間でもって母集団の特性値を推定する区間推定に対し、一つの値から母集団の特性値を推定することを点推定と呼ぶ。例として、大数の法則を利用して標本平均から母平均を近似することが挙げられる。区間推定と点推定を併せて統計的推定と呼ぶ。

仮説検定

[編集]

数学Iで扱ったように、仮説検定とは以下の手順で仮説が正しいか判断する手法である。

  1. 正しいかどうか判断したい仮説[1]に反する仮説[2]を立てる
  2. 仮説[2]のもとで事象が起こる確率を調べる。
  3. 確率が小さく、仮説[2]のもとで事象が起こりにくいと判断できるとき、仮説[2]は正しくないと判断できる。
  4. 仮説[2]が偽と判断されたため、それに反する仮説[1]が真であると判断される。

なお、仮説[2]が正しくないと判断できないとき、仮説[1]の真偽を判断することはできない


仮説[1]を対立仮説、仮説[2]を帰無仮説と呼び、仮説が正しくないと判断することを「仮説を棄却する」という。棄却の基準となる確率を有意水準あるいは危険率と呼び、αで表す。有意水準にはよく5%(α=0.05)、1%(α=0.01)が用いられる。有意水準に対して帰無仮説が棄却されるような確率変数の値の範囲を棄却域と呼ぶ。また、有意水準αを用いて仮説検定を行うことを「有意水準αで検定する」という。なお、対立仮説、帰無仮説をそれぞれ「仮説H1:〇〇」「仮説H0:☆☆(〇〇でない)」のように表すこともある。また、仮説が棄却されないことを「仮説を採択する」という場合がある。


数学Iでは、公正なコインを投げて裏表の出る回数を調べる試行の相対度数から帰無仮説のもとで事象が起こる確率を求めたが、ここでは正規分布を利用することを考える。


両側検定

母比率の検定において、帰無仮説のもとで二項分布に従う確率変数Xを設定すると、正規分布表を利用することができる。

例題
ある一枚の硬貨について、表が出る確率をpとする。コインを100回投げて63回表が出たとき、「この硬貨は歪んでいる(p≠0.5)」と判断してよいか、有意水準5%で検定することにした。
帰無仮説として「この硬貨に歪みはなく、p=0.5である」を立てると、100回コインを投げて表の出る回数Xについて、X∼B(100,0.5)である。ここで期待値mと標準偏差σを求めると、m=100⋅0.5=50,σ=100⋅0.5⋅(1−0.5)=5なので、Z=X−505とおくと近似的にZ∼N(0,1)である。
正規分布表からP(|Z|≤1.96)≒0.95なので、有意水準5%における棄却域はZ≤−1.96,1.96≤Zである。
X=63のとき、Z=63−505=2.6であり、この値は棄却域に入るので帰無仮説を棄却できる。よって、この硬貨は歪んでいると判断して良い。

上の例題において、正規近似と標準化を同時に行なっていることに注意。

母平均の検定も、同様に行うことができる。

例題
250g入りと表示された塩の袋の山から、無作為に100袋を抽出して重さを調べたところ、平均値が248.9gであった。標本標準偏差が4.5gであるとき、1袋あたりの重さが表示通りであると判断して良いか、有意水準1%で検定することにした。
重さの標本平均をX‾とおき、帰無仮説「母平均μについて、μ=250である」を立てる。標本の大きさが十分大きいと考えると、母標準偏差の代わりに標本標準偏差を用いて良いので、帰無仮説が正しいとき、近似的にX‾∼N(250,4.52100)である。
4.52100=0.452であるから、Z=X‾−2500.45とすると近似的にZ∼N(0,1)である。
正規分布表からP(|Z|≤2.58)≒0.99なので、有意水準1%における棄却域はZ≤−2.58,2.58≤Zである。
X‾=248.9のとき、Z=248.9−2500.45≒−2.4であり、これは棄却域に入らないので、帰無仮説を棄却できない。すなわち、1袋あたりの重さが表示通りでないとは判断できない。

なお、上の例題においてα=0.05ならば帰無仮説を棄却できる。このように、有意水準の値を変えると結論が変わる場合がある。

上の二つの例題では、棄却域を正規分布の両側にとっている。このような検定を両側検定と呼ぶ。


片側検定

両側検定に対し、棄却域を正規分布の片側にとる検定を片側検定と呼ぶ。 両側検定との違いは、対立仮説が「確率(平均)値が示されている値通りである」でなく「確率(平均)値が上がった(下がった)」である点である。

例題
ある種子の発芽率は従来80%であったが、発芽しやすいように品種改良した。品種改良した種子から無作為に400個抽出して種を蒔いたところ、342個が発芽した。品種改良によって発芽率が上がったかどうか、有意水準1%で検定することにした。
品種改良した種子の発芽率をpとする。品種改良によって発芽率が下がったことは考慮しないので、前提としてp≥0.8である。この前提のもとで発芽率が上がったならばp>0.8である。
この前提のもとで帰無仮説「発芽率が上がらなかった(p=0.8)」を立てる。帰無仮説が正しいとすると、400個のうち発芽する種子の個数をXとしたときX∼B(400,0.8)である。
ここで期待値mと標準偏差σを求めると、m=400⋅0.8=320,σ=400⋅0.8⋅(1−0.8)=8なので、Z=X−3208とおくと近似的にZ∼N(0,1)である。
正規分布表からP(0≤Z≤2.33)≒0.49なので、有意水準1%における棄却域は2.33≤Zである。
X=342のとき、Z=342−3208=2.75であり、この値は棄却域に入るので帰無仮説を棄却できる。よって、品種改良により発芽率が上がったと判断して良い。

棄却域を片側にとっているため、正規分布で近似する値は1−αではなく0.5−αであることに注意。


仮説検定の問題を解く際は、文脈から両側検定なのか片側検定なのか判断することになるので、文章読解力が必要になる。

なお、実際に検定を行うとき、「両側検定・片側検定の片方で帰無仮説が棄却されないからもう片方を試す」という操作は「検証が恣意的」と判断されてしまう可能性があるためしてはいけない。


不偏分散とt検定

ð(X‾)=∑k=1n(Xk−X‾)2を偏差二乗和という。

標本分散S2はðを標本の大きさnで割った値であるが、実は標本の大きさから1を引いたn−1(標本の自由度という)で割った値を用いる方がデータ解析の精度が上がることが知られている。これは、標本平均X‾が各Xkの関数であることが拘束条件となってパラメータ数が実質的に1だけ少なくなることが理由である。

そのため、実際の推定や検定では不偏分散(不偏標本分散)U(X‾)=ð(X‾)n−1を用いるのが普通である。要するに、母分散が分からないときには標本分散ではなく不偏分散を用いるべきということである。

不偏分散を標本の大きさで割って正の平方根をとった値SE(X‾)=U(X‾)nを標準誤差という。

このとき、確率変数Y=X‾−μSE(X‾)が従う分布を自由度n−1のt分布といい、tn−1と表す。

t分布による推定や検定(t検定)は、このページで扱った区間推定・仮説検定と同様の考え方を用いてt分布表の値から計算すれば良い。詳しくは理数科向けのページで扱う。

標準誤差の式に不偏分散ではなく母分散を入れると、Z=X‾−μσ2n∼N(0,1)であり、このページで扱った「母分散による推定・検定」と一致する。

このように、何か統計量を検定するときは「(統計量の標本値-統計量の真値)/統計量の標準誤差」が従う分布を見ることが多い。なお、母分散の検定にはχ2分布という分布が用いられる。これも詳しくは理数科向けのページで扱う。

このページで扱ったような、標準正規分布による検定をZ検定といい、t検定やχ2検定と区別する。


過誤(発展)

仮説検定を行うと、2種類の誤りが生じる可能性がある。 一つは、帰無仮説が本当は正しいのにも拘らず、得られたデータが棄却域に入ってしまったことにより帰無仮説が棄却されることである。これを第一種の過誤(偽陰性・慌て者の誤り)と呼ぶ。このとき有意水準αは第一種の過誤が起こる確率であり、有意水準のことを「危険率」とも呼ぶのはこれが理由である。

もう一つは、帰無仮説が本当は誤っているにも拘らず、得られたデータが棄却域に入らなかったために帰無仮説を採択してしまうことである。これを第二種の過誤(偽陽性・惘 (ぼんや) り者の誤り)と呼ぶ。第二種の過誤が起こる確率βは、仮説検定の際には全く言及されない。これが、「帰無仮説が採択されたときに帰無仮説が正しいと結論付けてはいけない」理由である。

纏めると、以下の表のようになる。

帰無仮説を棄却
帰無仮説を採択
帰無仮説が正しい
第一種の過誤
正しい判断
帰無仮説が誤り
正しい判断
第二種の過誤

一般に、有意水準αが小さいほど棄却域が狭まるので、第二種の過誤が起きる確率βが大きくなる。逆も然りである。

この二つの過誤を品質管理に当てはめると、第一種の過誤は「本当は製品に問題がないにも拘らず、製品の検査段階で不良品と判断して出荷しないこと」に対応し、生産者リスクと呼ばれる。また、第二種の過誤は「本当は製品に問題があるにも拘らず、検査段階で問題なしと判断され出荷されてしまうこと」に対応し、消費者リスクと呼ばれる。

なお、第二種の過誤の余事象の確率1−βを検出力といい、βよりはこちらの方を用いることが多い。これは、βの値が見ている統計量の真の値に依存するからである。

例えば、母標準偏差σがわかっている母平均μの片側Z検定で平均の標本値μ0、有意水準αの棄却域がX‾>μ0+zασnのとき、真の平均がμ=μ1>μ0だったとすると第二種の過誤が起こる確率はβ=P(X‾≤μ0+zασn)=P(Z≤zα−μ1−μ0σn)=p(zα−μ1−μ0σn)である。このμ1は一般には決定できないので、実務的には1−βを用いることで「μ1−μ0がどれだけ離れていたらどの程度検出できるか」を議論することが多い。

演習問題

[編集]

付録

[編集]

正規分布表

[編集]

p(−u)=p(u)なので、uが正の値のときみ記載する。

u.00.01.02.03.04.05.06.07.08.09
0.00.000000.003990.007980.011970.015950.019940.023920.027900.031880.03586
0.10.039830.043800.047760.051720.055670.059620.063560.067500.071420.07535
0.20.079630.083170.087060.090950.094840.098700.102570.106420.110260.11409
0.30.117910.121720.125520.129300.133070.136830.140580.144310.148030.15173
0.40.155420.159100.162760.166400.170030.173650.177240.180820.184390.18793
0.50.191360.194970.198470.201940.205400.208840.212260.215660.219040.22241
0.60.225750.229470.232370.235650.238910.242150.245370.248570.251750.25490
0.70.258040.261150.264240.267310.270350.273370.276370.279350.282310.28524
0.80.288150.291030.293890.296730.299550.302340.305110.307850.310570.31327
0.90.315940.318590.321210.323810.326390.328940.334170.333980.336460.33891
1.00.341350.343760.346140.348500.350830.353140.355430.357690.359930.36214
1.10.364330.366500.368640.370760.372860.374930.376980.379000.381000.38298
1.20.384930.386860.388770.390650.392510.394350.396170.397960.399730.40148
1.30.403200.404900.456080.408240.409880.411490.413090.414660.416200.41774
1.40.419240.420730.422200.423640.425070.426470.427860.429220.430560.43189
1.50.433190.434480.435750.436990.438220.439430.440620.441790.442950.44408
1.60.445200.446300.447380.448450.449500.450530.451540.452540.453520.45449
1.70.455440.456370.457280.458190.459070.459940.460800.461640.462460.46327
1.80.464070.464850.465620.466380.467120.467840.468560.469260.469950.47062
1.90.471280.471930.472520.473200.473810.474410.475000.475580.476150.47670
2.00.477250.477780.478310.478820.479330.479720.480300.480770.481240.48169
2.10.482140.482570.483000.483410.483820.484220.484610.485000.485370.48574
2.20.486100.486450.486790.487130.487460.487780.488090.488400.488700.48899
2.30.489280.489560.489830.490100.490360.490610.490860.491110.491340.49158
2.40.491800.492020.492240.492450.492660.492860.493050.493240.493430.49361
2.50.493790.493960.494130.494300.494460.494610.494770.494920.495060.49520
2.60.495340.495470.495600.495730.495860.495980.496090.496210.496320.49643
2.70.456530.496640.496740.496830.496930.497020.497110.497200.497280.49737
2.80.497450.497520.497600.497670.497740.497810.497880.497950.498010.49807
2.90.498130.498190.498250.498300.498360.498410.498460.498510.498560.49860
3.00.498650.498690.498740.498780.498820.498860.498890.498930.498970.49900
3.10.499900.499070.499100.499130.499160.499180.499210.499240.499260.49929
3.20.499310.499340.499360.499380.499400.499420.499440.499460.499480.49950
3.30.499520.499530.499550.499570.499580.499600.499610.499620.499640.49965
3.40.499660.499680.499690.499700.499710.499720.499730.499740.499750.49976
3.50.499770.499780.499780.499790.499800.499810.499820.499820.499830.49984