📊 対象級:1級 | 重要度:A(頻出)
要点(BLUF)
「テストの良し悪し(信頼性・妥当性)をどう数量化するか」を扱うのがテスト理論です。1級(統計応用・人文科学)では古典的テスト理論(CTT)と項目反応理論(IRT)の対比が頻出。両者の根本的な違いは「項目の難しさ・能力の指標が、たまたま受けた受験者集団に依存するか否か」です。
- 古典的テスト理論(CTT):観測得点を (真の得点+誤差)と分解し、信頼性係数 =「観測得点の分散のうち真の得点で説明される割合」で測定の安定性を測る。実務ではクロンバックαで内的整合性として近似する。弱点は標本依存:難易度や識別力の指標が受験者集団ごとに変わってしまう。
- 項目反応理論(IRT):受験者の潜在能力 と、各項目の正答確率の関係を**項目特性曲線(ICC)**で表す。2PLでは (=識別力、=困難度、3PLは当て推量 を追加)。項目パラメータが受験者集団に依存しない(不変性)のが最大の強み。能力と項目を同一尺度に乗せられる。
- 測定精度はIRTでは情報量で表す。2PLの項目情報量は 、テスト情報量は項目情報量の和、能力推定の標準誤差は 。能力 ごとに測定精度が変わる(CTTの「単一の信頼性係数」と対照的)。
1級(統計応用)では a・b・c の読み取り、情報量と測定精度の関係、CTT/IRTの対比が問われます(範囲・配点は改訂されうるため要最新確認)。
graph TD ROOT["テスト理論<br/>テストの良さを数量化する"] --> CTT["古典的テスト理論 CTT"] ROOT --> IRT["項目反応理論 IRT"] CTT --> XTE["観測得点モデル<br/>X = T + E"] XTE --> REL["信頼性係数<br/>ρ = V[T]/V[X]"] REL --> ALPHA["クロンバックα<br/>内的整合性で近似"] CTT --> VAL["妥当性<br/>内容・基準関連・構成概念"] CTT -.->|弱点| DEP["標本依存・テスト依存<br/>指標が集団で変わる"] IRT --> ICC["項目特性曲線 ICC<br/>能力θ→正答確率"] ICC --> MODELS["ロジスティックモデル<br/>1PL / 2PL / 3PL"] MODELS --> PARAMS["a 識別力 / b 困難度 / c 当て推量"] IRT --> INFO["項目情報量・テスト情報量<br/>SE(θ)=1/√I(θ)"] IRT -.->|強み| INV["項目パラメータの不変性<br/>集団に依存しない"] DEP -.->|IRTが克服| INV
1. 古典的テスト理論(CTT)
1.1 観測得点モデル
CTTの出発点は、テストで観測される得点 を、その人が本来持つ真の得点(true score) と誤差(error) の和に分解することです。
ここで真の得点 は「同じテストを(記憶などの影響なしに)無限回繰り返したときの観測得点の期待値」と定義されます。すなわち 。要するに「真の得点とは、その人にこの種の測定を繰り返したときの平均的な得点」であって、プラトン的な「真の能力」そのものではなく、あくまで測定の期待値である点が重要です。
このモデルには次の仮定が置かれます。
要するに「誤差は平均すればゼロ(系統誤差はない、ランダムな揺れだけ)」「真の得点と誤差は無相関(能力が高い人ほど誤差が大きい、といった関係はない)」。 から は自動的に従います。
この2仮定から、観測得点の分散が真の得点の分散と誤差分散にきれいに分解されます。
要するに「観測得点のばらつきは『本物のばらつき』と『誤差のばらつき』の足し算」。 という仮定があるからこそ、交差項が消えてこの分解が成り立ちます。
1.2 信頼性係数
信頼性(reliability)は「測定がどれだけ安定して同じ結果を出すか」の指標で、観測得点の分散のうち真の得点で説明される割合として定義されます。
要するに「観測得点のばらつきのうち、本物(真の得点)由来は何割か。残りは誤差」。 で、1に近いほど誤差が小さく信頼性が高い。 なら (誤差ゼロ)、 なら観測得点はすべて誤差(測定の体をなさない)。
なぜ「真の得点分散の割合」が信頼性なのかは、**平行測定(parallel measurements)**を考えると腑に落ちます。平行測定とは、同じ真の得点 を測る2つのテスト 、 で、誤差が独立同分散()のものです。この2回の測定の相関を計算すると
となります(途中、、誤差同士・誤差と真値はすべて無相関)。要するに「信頼性係数とは、同じものを2回測ったときの2つの得点の相関」。これが再検査信頼性(test-retest reliability)——同じテストを時間を空けて2回実施し、その相関を信頼性の推定値とする——の理論的根拠です。
1.3 クロンバックα:内的整合性
平行測定や再検査は2回測定が必要ですが、現実には1回のテスト内の複数項目から信頼性を推定したい。そのための代表的指標がクロンバックのα係数で、内的整合性(internal consistency)——項目同士がどれだけ「同じ構成概念」を一貫して測っているか——を表します。
個の項目があり、項目 の得点の分散を 、合計得点 の分散を とすると
要するに「合計得点の分散のうち、項目間の共分散(=項目が同じものを測っている部分)が占める割合を、項目数で補正したもの」。なぜこの式が内的整合性を表すのかは導出(3節)で示します。直観的には、項目が互いに強く相関する(同じ概念を測る)ほど合計分散 が各項目分散の和より大きくなり、括弧内が1に近づいてαが上がります。
慣習的に α ≥ 0.7〜0.8 で「内的整合性が十分」とされますが、これは絶対基準ではなく、αは項目数に依存して上がる(項目を増やすだけで上がる)ため、高ければ良いとは限りません。
1.4 妥当性(validity)
信頼性が「測定の安定性・再現性」なのに対し、**妥当性(validity)**は「測りたいものを本当に測れているか」です。両者は独立で、信頼性が高くても妥当でないことはあり得ます(精密だが的外れな物差し)。逆に妥当であるには一定の信頼性が前提になります。古典的には3種に分類されます(妥当性の概念は歴史的に変遷し、現在は「すべて構成概念妥当性に収斂する」という統合的見方が主流である点も要最新確認の論点)。
| 妥当性の種類 | 問うこと | 評価の仕方 |
|---|---|---|
| 内容的妥当性 | テスト項目が測定領域を過不足なく代表しているか | 専門家による論理的・理論的判断 |
| 基準関連妥当性 | 測定結果が外部の基準とどれだけ相関するか | 外的基準との相関係数。予測的(将来の基準を予測)と併存的(同時点の基準と一致)に分かれる |
| 構成概念妥当性 | 測りたい構成概念(知能・不安など)を実際に測れているか | 因子分析(因子分析)・収束的妥当性/弁別的妥当性の検討など |
要するに「内容=項目の網羅性(専門家判断)、基準関連=外部指標との相関、構成概念=理論上の概念をとらえているか」。1級では3種の区別と、信頼性と妥当性が別物(信頼性は妥当性の必要条件だが十分条件でない)という関係が問われます。
1.5 CTTの限界:標本依存・テスト依存
CTTの実務上の最大の弱点は、項目や受験者の指標が「たまたま受けた集団・たまたま使ったテスト」に依存することです。
- 項目の難しさが集団依存:CTTで項目の難易度は**通過率(その項目に正答した割合)**で測ります。だが同じ項目でも、能力の高い集団に出せば通過率が高く(簡単に見え)、低い集団に出せば通過率が低く(難しく見え)出ます。項目固有の難しさを、集団から切り離して表現できません。
- 受験者の能力がテスト依存:受験者の能力は**素点(合計得点)**で測りますが、易しいテストでは高く、難しいテストでは低く出ます。異なるテストを受けた受験者の能力を直接比べられない。
要するに「CTTでは『項目の難しさ』と『受験者の能力』が、測定の文脈(集団・テスト)と分かちがたく絡み合っている」。この標本依存・テスト依存を断ち切り、項目パラメータと能力を文脈から独立に表現するのが、次のIRTの動機です。
2. 項目反応理論(IRT)
2.1 項目特性曲線(ICC)と潜在能力
IRTは、受験者ごとに潜在能力(latent trait) という連続量を仮定し、「能力 の人がある項目に正答する確率」を の関数としてモデル化します。この関数のグラフが**項目特性曲線(Item Characteristic Curve, ICC)**です。
ICCは横軸が能力 (通常 〜 程度、平均0・標準偏差1に基準化)、縦軸が正答確率(0〜1)のS字(ロジスティック)曲線です。能力が高いほど正答確率が上がる、という単調増加を表します。CTTが「素点」という観測量を直接扱ったのに対し、IRTは観測できない を介して項目反応を確率的にモデル化する点が本質的に異なります。
2.2 ロジスティックモデル:1PL / 2PL / 3PL
ICCの具体的な関数形として、ロジスティック関数を使う3つのモデルが標準です。最も一般的な**2パラメータロジスティックモデル(2PL)**から書きます。
- :困難度(difficulty)。 のとき になる位置。つまり は「正答確率がちょうど50%になる能力値」。 が大きい項目ほど、高い能力がないと正答できない=難しい項目。横軸上で曲線を左右に平行移動させるパラメータ。
- :識別力(discrimination)。 における曲線の傾きに比例(傾きは )。 が大きいほどS字が立ち、能力がわずかに を超えると急に正答確率が上がる=能力の高低を鋭く識別する項目。 が小さいと曲線が寝て、能力差を区別しにくい。
このうち (全項目で識別力が等しい)と固定したのが1パラメータロジスティックモデル(1PL)=ラッシュモデルで、困難度 だけを項目パラメータとします。
さらに、選択式問題では能力が低くても当て推量(guessing)で正答することがあります。これを表すため、ICCの下限を まで持ち上げるのが**3パラメータロジスティックモデル(3PL)**です。
- :当て推量パラメータ。 でも (4択なら理論上 )。ICCの下漸近線を決める。能力が極端に低くても、まぐれ当たりで の確率は正答する。
注意:3PLでは のとき であり、ちょうど0.5ではありません。「 は正答確率50%の位置」という解釈は厳密には1PL・2PLでのものです。
| パラメータ | 名称 | 意味 | ICCへの効果 | 登場モデル |
|---|---|---|---|---|
| 困難度 | 正答率50%(1PL/2PL)になる能力位置 | 曲線を左右に平行移動(大きいほど右=難しい) | 1PL, 2PL, 3PL | |
| 識別力 | 付近での曲線の傾き() | 大きいほどS字が急峻(能力を鋭く識別) | 2PL, 3PL | |
| 当て推量 | での正答確率 | 曲線の下漸近線を まで持ち上げる | 3PL |
要するに「 は左右位置(難しさ)、 は傾き(識別の鋭さ)、 は下げ止まり(まぐれ正答)」。モデルが複雑になるほど現実をよく表すが、推定に必要なデータも増えます。
graph LR M1["1PL ラッシュ<br/>困難度 b のみ<br/>(a=1 固定, c=0)"] -->|識別力 a を追加| M2["2PL<br/>困難度 b + 識別力 a"] M2 -->|当て推量 c を追加| M3["3PL<br/>困難度 b + 識別力 a + 当て推量 c"] M1 -.->|パラメータ少→推定が安定| SIMPLE["少データでも安定<br/>表現力は低い"] M3 -.->|パラメータ多→大量データ必要| RICH["現実をよく表す<br/>推定に多データ"]
2.3 項目情報量・テスト情報量
IRTでは、CTTの「単一の信頼性係数」に代わって**情報量(information)**で測定精度を表します。決定的な違いは、測定精度が能力 ごとに変わることです(ある項目は能力中程度の人を精密に測れるが、極端な人にはほとんど情報を与えない)。
2PLモデルの**項目情報量(item information)**は
要するに「項目 が能力 の受験者についてどれだけ精密な情報を与えるか」。この式から重要な性質が読めます。
- (つまり )で項目情報量が最大: は で最大値 をとる二次関数だから。つまり項目はその困難度 付近の能力の人を最もよく測る。簡単すぎ・難しすぎる人( が0や1に近い)には情報がほとんどない。
- 識別力 の2乗に比例: が大きい(S字が急な)項目ほど、 付近で桁違いに多くの情報を与える。
テスト情報量(test information)は、項目反応が互いに独立(局所独立)という仮定のもとで、各項目情報量の単純和になります。
要するに「テスト全体の測定精度は、各項目の情報量を足し合わせたもの」。情報量が加法的なので、「能力 付近を精密に測りたいなら の項目を多く集める」といったテスト設計が可能になります。これがCTTにはないIRTの実務的強みです。
そして、能力推定値 の**標準誤差(測定の精度)**は、テスト情報量の平方根の逆数で与えられます。
要するに「情報量が多い能力帯ほど、その能力の人を誤差小さく(精密に)測れる」。CTTの信頼性が「テスト全体で1つの値」だったのに対し、IRTでは能力 ごとに測定精度が違う——これが情報量という概念の核心です。
2.4 能力 の推定(最尤・ベイズ EAP)
項目パラメータ が既知(先行調査で推定済み)として、ある受験者の反応パターン ( は項目 の正誤、正答1・誤答0)から能力 を推定します。局所独立の仮定から尤度は各項目の積で書け、
これを最大にする を求めるのが最尤推定(MLE)です。要するに「観測された正誤パターンが最も起こりやすくなる能力値を選ぶ」。ただしMLEは全問正答・全問誤答だと に発散する欠点があります(情報がないため)。
これを避けるため、 に事前分布(通常 )を置くベイズ推定が広く使われます。事後分布 を求め、その要約量で推定します。
- EAP(Expected A Posteriori、事後期待値):事後分布の平均を推定値とする。。最も標準的。
- MAP(Maximum A Posteriori、事後最頻値):事後分布の**最頻値(モード)**を推定値とする。
要するに「最尤推定はデータだけ見て極端な値になりがち(全問正解で発散)、ベイズ(EAP/MAP)は『能力は標準正規くらいだろう』という事前知識を加えて穏当な推定にする」。MAPは正則化付き最尤と同型で、EAPは事後分布全体を平均する分だけ安定します。
2.5 CTTとIRTの違い:項目パラメータの不変性
IRTの理論的に最も重要な性質が**不変性(invariance)**です。
項目パラメータの不変性:項目パラメータ は、どんな能力分布の受験者集団で推定しても(理論上)同じ値になる。逆に、能力 の推定値も、どの項目セット(テスト)で測っても同じ尺度で得られる。
CTTでは通過率(項目の難しさ)が集団依存、素点(能力)がテスト依存でした(1.5節)。IRTはこれを克服します。なぜ不変になるかというと、IRTは「能力 と項目パラメータ」を最初から分離してモデル化しているからです。ICC は「能力 の人が項目 に正答する確率」という** と項目の関係そのもの**を表すので、たまたまどんな の集団が受けたかには依存しません(CTTの通過率は「集団の 分布で平均した正答率」なので集団依存になる)。
これにより、IRTでは能力と項目困難度を同一の尺度(同じ 軸)上に置けます。「困難度 の項目」と「能力 の受験者」を直接比較でき、 ならその人はその項目に50%(1PL/2PL)で正答する、と即座に読めます。
| 観点 | 古典的テスト理論(CTT) | 項目反応理論(IRT) |
|---|---|---|
| 分析の単位 | テスト全体の得点 | 項目ごとの反応 |
| 能力の表現 | 素点(合計得点) | 潜在能力 (連続尺度) |
| 項目の難しさ | 通過率(正答割合) | 困難度 ( 軸上の位置) |
| 集団依存性 | あり(通過率・素点が集団/テストに依存) | なし(項目パラメータ・能力が不変) |
| 能力と項目の尺度 | 別々(直接比較不可) | 同一尺度( 軸上で比較可) |
| 測定精度の表現 | 単一の信頼性係数(テスト全体で1つ) | 情報量 (能力ごとに変わる) |
| 必要なサンプル | 比較的少なくてよい | パラメータ推定に多数の受験者が必要 |
| 主な用途 | 尺度の信頼性・妥当性の確認 | 項目バンク・テスト等化・CAT(適応型テスト) |
要するに「CTTは素点ベースで手軽だが集団・テストに依存。IRTは潜在能力ベースで集団に依存しない(不変)が、推定に多データが要る」。IRTの不変性は、項目を蓄積した項目バンク、異なるテストの得点を共通尺度に乗せるテスト等化、受験者の能力に応じて出題を変える**コンピュータ適応型テスト(CAT)**を可能にし、TOEFLなど大規模試験で実用されています。
3. 数式の導出
3.1 信頼性係数の分解(なぜ か)
1.1〜1.2節の流れを導出として再掲・整理します。出発点は2仮定 、。観測得点の分散は
第1ステップの「要するに」: という仮定が交差項を消し、観測分散が「本物の分散+誤差分散」に二分される。この分解ができるからこそ「本物が占める割合」を信頼性と定義できる。
第2ステップの「要するに」:信頼性は「誤差分散の割合 を1から引いたもの」とも書ける。誤差が小さいほど1に近づく。
平行測定 、( は独立同分散で とも無相関)の相関を取ると
第3ステップの「要するに」:(誤差絡みの共分散はすべて0)。つまり信頼性係数は「同じものを2回測った得点の相関」に等しい。これが再検査信頼性の正体。
3.2 クロンバックαの構造(なぜ内的整合性を表すか)
合計得点 の分散は、分散・共分散の展開公式から
第1ステップの「要するに」:合計分散は「各項目の分散の和」+「異なる項目間の共分散の総和」。後者の共分散項こそ「項目が同じものを測っている度合い」を表す。これを移項すると 。
αの定義式
第2ステップの「要するに」:αは結局「合計分散のうち項目間共分散が占める割合」を で補正したもの。項目同士が強く相関する(同じ概念を一貫して測る=内的整合性が高い)ほど共分散項が大きくなり、αが1に近づく。逆に項目が無関係なら共分散がゼロでαも0付近。これがαが内的整合性の指標である理由。
補正の意味:もし全項目が完全に等価(同じ分散・同じ共分散)なら は 個の項、 は 個の項からなる。係数 はこの項数のアンバランスを補正し、αが信頼性のスケール(最大1)に乗るよう調整する役割を持つ。
3.3 αは信頼性の下限(タウ等価測定で等号)
αと真の信頼性 の関係には重要な定理があります。
定理:一般にαは信頼性の下限(過小評価)である:。等号 が成り立つのは、項目が本質的タウ等価測定(essentially tau-equivalent)——各項目の真の得点が定数差を除いて等しい(、 は定数)——のとき。
「要するに」:αは「項目が皆ほぼ同等の重みで同じ概念を測る」という強めの条件下では信頼性そのものを与えるが、項目の質(識別力)がバラバラだと信頼性を低めに見積もる。だから「α=0.6 だから信頼性が低い」とは限らず、真の信頼性はそれ以上かもしれない。逆に「αが高ければ安心」でもなく、αは項目数を増やすだけでも上がる(次節)。実務でαを”信頼性そのもの”と断言するのは、本質的タウ等価という前提を暗黙に置いていることになる。この前提の妥当性は確認的因子分析(因子分析)で検証できる。
3.4 αは項目数とともに上がる(スピアマン・ブラウン)
3.2節の係数 と、項目を増やすと共分散項( 個)が分散項( 個)より速く増えることから、他の条件が同じなら項目数 を増やすほどαは上がります。これを定量化するのがスピアマン・ブラウンの公式で、テスト長を 倍にしたときの信頼性 は
「要するに」:信頼性 のテストを 倍の長さにすると信頼性は単調に上がる( で1に近づく)。項目を増やせば誤差が平均化されて相対的に小さくなるから。裏を返せば、αが高いのは「項目が良い」からとは限らず「項目が多い」だけかもしれない——αを信頼性指標として使うときの最大の注意点。
3.5 項目情報量 の導出(フィッシャー情報量との一致)
2.3節の項目情報量 が、なぜこの形になるかをフィッシャー情報量から導きます。項目 への反応 はベルヌーイ分布 に従い、その対数尤度は
フィッシャー情報量は(1パラメータの場合) で、これはスコア関数の分散にも等しい。スコアを計算すると()
第1ステップの「要するに」:スコアは「観測 と予測 のズレ に、ICCの傾き を掛けて分散で正規化したもの」。 はベルヌーイなので 、。よってスコアの分散=フィッシャー情報量は
第2ステップの「要するに」:一般のICCで項目情報量は 。「ICCの傾きの2乗を で割ったもの」で、これは2PLに限らず成り立つ一般形。
ここで2PLの場合、ロジスティック関数の微分は (ロジスティックの性質)。これを代入すると
第3ステップの「要するに」:2PLでは傾き なので、一般形に代入すると にきれいに収まる。識別力 の2乗が前に出るのは傾きが に比例するから(情報は傾きの2乗で効く=フィッシャー情報の本質)。 が残るのはベルヌーイ反応の分散構造から。()で が最大になるので、項目はその困難度付近で最大の情報を与える。
最後に、最尤推定量の漸近分散はフィッシャー情報量の逆数(クラメール・ラオの下限)なので、テスト情報量 から
第4ステップの「要するに」:標準誤差が になるのは、最尤推定量の分散がフィッシャー情報量の逆数になるという一般原理(クラメール・ラオ)の直接の帰結。情報量が能力ごとに違うから、測定精度も能力ごとに違う。
4. 試験での問われ方(1級)
1級(統計応用・人文科学)でのテスト理論の出題は、次の3系統が中心です。
(a) ICCパラメータ a・b・c の読み取り。 与えられたICCのグラフや式から、困難度 (50%正答=1PL/2PLの位置)・識別力 (傾き)・当て推量 (下漸近線)を読み取る/比較する問題。「2つの項目のICCが交差している、どちらが難しいか・識別力が高いか」「 が大きい項目は何を意味するか」といった形。 は左右位置、 は急峻さ、 は下げ止まりの対応を即答できることが要。3PLでは が50%正答位置ではない点()も狙われる。
(b) 情報量と測定精度の関係。 「項目情報量が最大になる能力は?」(→ 、すなわち の位置)、「識別力 を上げると情報量はどうなるか」(→ で効くので急増)、「テスト情報量が高い能力帯では はどうか」(→ で小さい=精密)といった、・・ の三式を結びつける問題。「特定の能力帯を精密に測るにはどんな項目を集めるか」というテスト設計の視点も問われる。
(c) CTTとIRTの対比。 「CTTの通過率はなぜ集団依存か」「IRTの不変性とは何か」「αは信頼性の何にあたるか(下限)」「能力と項目を同一尺度に乗せられるのはどちらか」といった、両理論の本質的差異を問う概念問題。特に標本依存(CTT)vs 不変性(IRT)は最頻出。クロンバックαが本質的タウ等価測定の下で信頼性に一致し、一般には下限であること、項目数を増やすだけで上がることの2点は誤解されやすく狙われやすい。
5. 引っかけ・頻出論点
- ⚠️ 真の得点 は「真の能力」ではなく「測定の期待値」:、つまり「同じ測定を無限回繰り返した平均」と定義される。測定そのものに系統的バイアスがあれば、 にもそのバイアスが含まれる。「 は誤差のない真の実力」と理解すると、妥当性(測りたいものを測れているか)との区別が曖昧になる。
- ⚠️ 信頼性と妥当性は別物:信頼性(再現性・安定性)が高くても妥当(測りたいものを測れている)とは限らない。体重計で身長を測れば、何度測っても同じ値(高信頼性)だが身長としては無意味(低妥当性)。信頼性は妥当性の必要条件だが十分条件でない。
- ⚠️ クロンバックαは信頼性そのものではなく下限:一般に 。等号は本質的タウ等価測定(項目が定数差を除いて等価)のときだけ。「α=0.65 だから信頼性不足」は早計で、真の信頼性はそれ以上のことがある。逆にαが高いのは項目が多いだけかもしれない(スピアマン・ブラウン)。
- ⚠️ 困難度 が大きい=難しい、で符号に注意: は「正答率50%になる能力位置」。 が大きいほど高い能力がないと正答できない=難しい項目。通過率(高いほど易しい)とは向きが逆なので混同しない。CTTの「正答割合(高い=易しい)」とIRTの「困難度 (高い=難しい)」は逆向き。
- ⚠️ 3PLでは は50%正答の位置ではない:当て推量 があるため での正答確率は (50%より高い)。「 は常に正答率50%の能力」は1PL・2PL限定。3PLでICCの変曲点・傾き最大の位置が 、という理解が正確。
- ⚠️ 項目情報量が最大なのは ()であって が大きい所ではない: で は で最大。 は最大値の高さを決める( 倍)が、最大になる能力位置は困難度 で決まる。「識別力の高い項目はどんな能力でも情報が多い」は誤り——その項目の 付近に限る。
- ⚠️ テスト情報量は項目情報量の単純和、信頼性係数のような0〜1の値ではない: で、項目を足せば増え続ける(上限1ではない)。CTTの信頼性係数(0〜1)と同じスケールではなく、 を介して精度に翻訳する。
- ⚠️ 最尤推定は全問正答・全問誤答で発散する:。実務でベイズ(EAP/MAP、事前 )を使う主因の一つ。「IRTの能力推定は常に最尤」と思い込まない。
- ⚠️ 不変性は「無限母集団・モデルが正しい」前提の理論的性質:IRTの項目パラメータが集団に依存しないのはモデルが正しく成立する理想下での話。現実の有限標本・モデル誤指定では推定値は変動する。「IRTなら常に集団に依らず同じ値が出る」と過信しない。
よくある疑問(Q&A)
Q1. CTTとIRT、結局どちらが優れているのですか? IRTがあればCTTは不要?
優劣ではなく目的とデータ量で使い分けます。IRTは項目パラメータの不変性という強力な利点を持ち、項目バンク・テスト等化・適応型テスト(CAT)といった高度な運用を可能にしますが、パラメータ推定に多数の受験者(2PLで数百人、3PLでさらに多く)が必要で、モデルが当てはまることの確認も要ります。小規模な尺度開発や、手早く内的整合性を確認したい場面ではCTT(クロンバックα)で十分です。実務では「まずCTTで尺度の素性を見て、大規模運用ならIRTへ」という流れが一般的で、両者は補完関係にあります。
Q2. 困難度 と通過率(正答割合)はどう違うのですか? どちらも難しさの指標では?
両方とも「難しさ」を表しますが、集団依存性が決定的に違います。通過率(CTT)は「ある集団でその項目に正答した割合」なので、能力の高い集団なら高く、低い集団なら低く出ます——同じ項目でも集団で値が変わる。困難度 (IRT)は「正答率50%になる能力 の値」で、ICCそのものから決まり、どんな集団で推定しても理論上同じ値になります(不変性)。さらに は能力 と同じ軸上の値なので「能力 の人にとって の項目はちょうど五分五分」と能力と直接比較できます。通過率にはこの比較可能性がありません。
Q3. 項目情報量の式に出てくる は何を意味しているのですか?
はベルヌーイ反応(正答/誤答)の分散そのものです。 のとき最大()、 が0や1に近いとほぼ0になります。直観的には、正答確率が五分五分の項目が、その人の能力について最も情報を与えるということ。簡単すぎて誰でも解ける項目()や、難しすぎて誰も解けない項目()は、正誤を見ても能力の区別がつかない(皆同じ結果)ので情報が乏しい。 は「解けるか解けないかが能力に最も敏感に反応する」点で、ここで情報が最大になります。これに識別力 (傾きの効き)が掛かって になります。
Q4. なぜ識別力 は2乗で情報量に効くのですか? 1乗ではダメ?
フィッシャー情報量がスコア(対数尤度の傾き)の分散だからです(3.5節)。情報量は「ICCの傾き の2乗を で割った」一般形 を持ち、2PLでは傾き が に比例するので、傾きの2乗を取ると が出てきます。本質は「推定精度は曲線の傾きの2乗で決まる」——傾きが急なほど、能力のわずかな違いが正答確率の大きな違いに変換され、観測(正誤)から能力を精密に逆算できる。傾きが2倍なら情報は4倍()になる、というのがフィッシャー情報量の一般的性質で、IRTの もその現れです。
Q5. クロンバックαが「項目を増やすだけで上がる」なら、信頼性の指標として使う意味があるのですか?
意味はありますが、αだけで質を判断しないのが正しい使い方です。αが上がる要因は2つ——(1)項目同士が同じ概念をよく測る(内的整合性が高い=望ましい)、(2)単に項目数が多い(スピアマン・ブラウン)。同じ項目数で比べればαは内的整合性を反映する有用な指標ですが、項目数が違うテスト間でαを比べたり、「α=0.9 だから良い尺度」と項目数を無視して断じるのは誤りです。項目を10問から30問に増やせば、たとえ追加項目の質が並でもαは上がります。だから「αが0.7を超えた」ことよりも「少ない項目数でも高いα」や「項目間相関の分布」を見るべきで、αは複数ある信頼性証拠の一つとして相対的に扱います。
まとめ
- 古典的テスト理論(CTT):観測得点 (、)と分解し、。信頼性係数 =真の得点分散の割合=平行測定の相関=再検査信頼性。クロンバックα は内的整合性を測り、本質的タウ等価測定で信頼性に一致、一般には下限。項目数を増やすだけで上がる(スピアマン・ブラウン)。妥当性は内容・基準関連・構成概念の3種で、信頼性とは別物。
- CTTの限界:通過率(項目の難しさ)が集団依存、素点(能力)がテスト依存。項目と能力を文脈から切り離せない。
- 項目反応理論(IRT):潜在能力 と正答確率をICCで結ぶ。2PL (=50%正答位置・左右移動、=傾き・識別)、1PL/ラッシュは 固定、3PLは下漸近線 (当て推量)を追加。
- 情報量:項目情報量 (フィッシャー情報量から導出、= で最大、 で効く)、テスト情報量 、。測定精度が能力ごとに変わる。能力推定は最尤(全問正答で発散)かベイズ(EAP/MAP)。
- CTT vs IRT:IRTは項目パラメータの不変性(集団に依存しない)を持ち、能力と項目を同一尺度に乗せる。これが項目バンク・テスト等化・CATを可能にする。代償は推定に多データが必要なこと。
- 引っかけ:は測定の期待値(真の能力でない)/信頼性≠妥当性/αは信頼性の下限・項目数で上がる/は大きいほど難しい(通過率と逆)/3PLのは50%位置でない/情報量最大は/最尤は全問正答で発散/不変性は理想下の性質。
関連ノート
- 因子分析 構成概念妥当性の検討や、クロンバックαの前提(本質的タウ等価測定)の確認に用いる。IRTの潜在変数モデルとも発想を共有
- 一般化線形モデル(ロジスティック・ポアソン回帰) IRTのロジスティックモデル(2PL)はロジットリンクの2値回帰と同型。ICCはGLMのS字応答曲線にあたる
- 構造方程式モデル・パス解析 潜在変数を扱う点でIRTと連続する。測定モデル(観測変数と潜在変数の関係)の発想が共通
- 潜在クラス分析 潜在変数が連続(IRTの)か離散(潜在クラス)かの違い。測定の潜在変数モデルとして対をなす
- 人文科学分野ハブ(Phase 9) 人文科学分野(心理・教育測定)の全体地図
- 1級「統計応用」(Phase 9 目次) 統計応用ドメインの全体地図