GMAP対策Web問題集・模試
GMAP-CT STRATEGY GUIDE攻略ガイド

有意差なしは「差がない」?|検定力と残る不確実性を図解

差を検出できなかったことと、実務上同じと判断できることを分ける。架空の二つの区間、第一種・第二種の過誤、検定力の条件を図解し、調査報告の結論を読み分けます。

判断基準 → 実行手順 → 次の一手最終更新 2026/10/24
学習ナビゲーター
学習ナビゲーター
今日の学習ゴール

読み取りや判断の手順をひとつ整理し、例題で使ってみましょう。

読みたい内容を選ぶ
まず結論

この記事の要点

保存した記事
文字サイズ・保存状態本文の文字(この端末に保存)

保存状態を確認しています…

目次:読みたい項目を選ぶ
全体像・読み進め方を確認する
COACH'S NOTE

差を検出できなかったことと、実務上同じと判断できることを分ける。架空の二つの区間、第一種・第二種の過誤、検定力の条件を図解し、調査報告の結論を読み分けます。

要点を指し示す女性講師

「有意差が出なかった」だけで、同じと決めてよいか

新しい方法と従来の方法で平均処理時間を比べたところ、統計的に有意な差は見つからなかったとします。ここから「両者の処理時間は完全に同じ」「新しい方法に効果はない」と言い切ると、判断が一段強くなります。差を示す根拠が足りなかったことと、差がないことを確かめたことは同じではありません。

本記事はGMAPの数量的な文章や論証を読む補助学習です。公式の出題範囲を追加指定するものではありません。独自の図と架空の結果を使い、検定の結論から何を言えるかに焦点を絞ります。統計解析の実施や、特定の施策の採否を代行するものではありません。

帰無仮説を棄却しない、という結論の範囲

平均の差がゼロである、という帰無仮説を調べる検定を考えます。使う手法と前提、事前に決めた有意水準に照らして棄却しなかった場合、その検定では帰無仮説に反する十分な根拠を得なかったと整理します。帰無仮説が正しい確率を、そのまま計算したわけではありません。

p値が0.05を超えたから、差がない確率は95%以上だと読むのも誤りです。p値は、指定したモデルの下でのデータの振る舞いに関する量であり、仮説が真である確率そのものではありません。ASAの声明も、p値だけで仮説の真偽や効果の重要さを決める読み方を避けるよう説明しています。

実際の差があっても、今回の検定では検出できない

図解|実際の差と、検定の判断は別の軸

細部は図を左右に動かして確認できます。

二つの判断と、二つの実際の状態実際には差がない場合棄却:第一種の過誤棄却しない:この状態では誤りでない実際には特定の差がある場合棄却:その差を検出棄却しない:第二種の過誤
図の内容を文章で読む

差がない場合も誤って棄却する場合があり、差がある場合も棄却できない場合がある。検定結果だけから実際の状態を断定しない。

実際には差がないのに帰無仮説を棄却する判断を第一種の過誤、実際には対象とする差があるのに棄却しない判断を第二種の過誤と呼びます。現実の状態をいつも知ることができる、という意味の図ではありません。実際の状態と検定の判断を分けて、間違い方を定義したものです。

有意水準5%を設定したからといって、第二種の過誤も5%に自動で決まるわけではありません。どれほどの差を見つけたいか、ばらつき、標本数、検定方法などで検出のしやすさが変わります。「5%を使ったから、どの誤りも小さい」と読むのは飛躍です。

検定力80%は、今回の結論が80%正しいという意味ではない

検定力は、特定の実際の差やモデルを置いたときに、その検定が帰無仮説を棄却する確率です。第二種の過誤の確率をβとしたとき、対応する検定力は1−βです。例えば、ある特定の差を想定した設計でβが20%なら、検定力は80%です。

この80%を、既に得られた一回の結果が正しい確率と読み替えません。また、どの差を想定しても同じ検定力になるとは限りません。小さな差は、大きな差より検出しにくい場合があります。実際の差やモデルを指定せず、今回の非有意の結果だけから見逃し率を確定することもできません。

自作例:同じ「ゼロを含む区間」でも、幅を見る

同じ定義で測った平均処理時間の差について、Aでは95%信頼区間が−12〜+12分、Bでは−2〜+2分だった、という架空の設定を置きます。いずれも点推定は0分とし、同じ方法の両側5%検定に対応する区間とします。実測値や標本から計算した結果ではありません。

図解|ゼロを含んでいても、残る差の幅は違う

細部は図を左右に動かして確認できます。

二つの架空の区間を同じ目盛で比較背景:事前の目安 −3〜+3分A:−12〜+12分B:−2〜+2分−150+15同じ条件の平均処理時間の差(分)
図の内容を文章で読む

横軸は処理時間の差、マイナス15分からプラス15分。Aの架空の95%信頼区間はマイナス12からプラス12分、Bはマイナス2からプラス2分。事前の実務上の目安マイナス3からプラス3分を破線で示す。正式な同等性検定を行った結果ではない。

両方の区間にゼロが含まれていても、Aには大きな時間短縮と大きな時間増加の両方が残っています。Bは、示されたモデルの下で推定の不確実性が狭い設定です。「有意かどうか」という一語だけにすると、この違いが消えてしまいます。

実務上の同等性には、先に許容する差を考える

仮に、仕事上は−3〜+3分までの差を小さいと扱う、と結果を見る前に決めていたとします。Bの区間はその範囲の内側、Aの区間は外側へ大きく広がっています。実務上小さい差に収まるという主張を検討する情報は、Bのほうが多いと読めます。ただし、これだけで正式な同等性検定を実施したことにはしません。

同等性を正式に判断するなら、比較の目的、許容差、検定手順、信頼水準、必要なデータなどを事前に定めます。差の検定で棄却しなかった結果を、そのまま別の目的の検定へ読み替えないことが大切です。結果を見てから都合のよい許容差を作る方法も避けます。

標本を増やしても、偏った対象や誤測定は直らない

他の条件が適切で同じなら、標本数を増やすことで検出しやすくなる場合があります。ただし、対象の選び方に偏りがある、比較群で測り方が違う、同じ人を独立な別人として数える、といった問題が標本数だけで解消するわけではありません。

逆に、非常に大きな標本では、仕事上は小さい差が統計的に有意になることもあります。検出された差の大きさや、費用・負担との関係は別に確認します。統計的な有意性と、業務上の重要さを同じ意味で扱わないようにします。

調査の結論を読むときに、四つの問いへ戻る

問い確認したいこと
何を比較したか対象・測定方法・差の定義
何を検出しようとしたか意味のある差・検定方法・標本設計
どれほど不確実か効果の推定値・区間・前提
どこまで言えるか非有意、実務判断、同等性の主張を区別

多数の指標から有意になったものだけを選ぶ問題は多重比較、平均の位置と次の一件を混ぜる問題は信頼区間と予測区間の記事で扱います。本記事の焦点は、差が検出されなかったときに、何がまだ分からないかです。似た用語の別記事を増やすのではなく、結論が強くなりすぎていないかを点検するために使ってください。

次の学習と確認資料

比較回数と誤判定 / 平均と一件の区間 / ばらつきの読み方

考え方を確認したら、問題・解説の見本、登録不要の無料6問を確認できます。教材条件は料金ページで確認してください。

この記事の図・数値・ケースは編集部独自の学習用です。公式問題や過去問の再現ではなく、出題頻度や合格を保証しません。当サイトは非公式の対策サービスです。

確認資料:NIST:Quantitative Techniques(仮説検定・誤り・検定力)(2026年10月24日確認)。図解と練習例は当編集部が別途作成しています。

確認資料:ASA:2016年のp値に関する声明(発表資料)(2026年10月24日確認)。図解と練習例は当編集部が別途作成しています。

6問・12分で、CTの6領域を体験する

6領域から各1問を解き、正誤・所要時間・解説を確認できます。6問では能力やランクを判定しません。30問・60分の通し模試はCTパックに含まれます。無料お試しは登録不要。希望する方は登録後に結果を保存できます。

有料模試の独自スコアは学習用の参考指標であり、本番の予測点・合否判定ではありません。無料6問では能力判定・推定スコア・ランクは表示しません。

▶ GMAP-CT 無料6問を試す(12分)

※本サイトは独立した非公式の試験対策コンテンツであり、株式会社グロービス/GMAPの公式サービスとは関係ありません。試験の形式や出題範囲は実施回・実施企業により異なる場合があります。

学習図解ライブラリ:図を保存して復習・勉強会に使う

↑