RADIOLOGY GLOSSARY
観察者実験（Observer performance study）
IN ONE LINE
一言でいうと
人またはモデル観察者に一定の画像課題を提示し、検出や判断の成績から画像・装置・処理法の有用性を評価する実験です。
BEGINNER GUIDE
はじめて学ぶ方へ
画像を見て対象を発見できるかを、条件をそろえた実験で比べる方法です。
身近なイメージ
同じ100試行の二択課題で、条件Aの正答80、条件Bの正答85を仮定します。 Bが5ポイント高い観察結果です。統計的有意差や臨床優越性はこれだけでは確定しません。
そもそも観察者実験とは？
画像を見て対象を発見できるかを、条件をそろえた実験で比べる方法です。
課題に基づく画像評価。／ROC・強制選択などの設計。／観察者と症例のばらつき。
定義・しくみ
人またはモデル観察者に一定の画像課題を提示し、検出や判断の成績から画像・装置・処理法の有用性を評価する実験です。物理指標だけでなく、対象を見つける能力を測る点が特徴です。
FORMULA
正答率とAUCは別の指標です。
正答率の差は有意差の検定結果ではありません。
具体例で確認
同じ100試行の二択課題で、条件Aの正答80、条件Bの正答85を仮定します。
正答率A = = 80%; B = = 85%
Bが5ポイント高い観察結果です。統計的有意差や臨床優越性はこれだけでは確定しません。
専門的にもう一歩
課題には病変の有無の評定、強制選択や位置特定などがあります。ROC、AUCや正答率は実験設計に対応して選び、症例と観察者のばらつき、学習・記憶・順序効果を扱います。複数観察者・複数症例を同じ独立標本として単純集計すると不確かさを過小評価することがあり、適切な統計設計が必要です。
臨床・測定での確認点
- 課題・症例選択・真値を明示します。
- 提示順序を制御し観察者を適切に訓練します。
- 観察者・症例の反復依存性と不確かさを評価します。
覚えるポイント
- 課題に基づく画像評価。
- ROC・強制選択などの設計。
- 観察者と症例のばらつき。
間違えやすい点
- 主観評価なら設計不要ということではありません。
- 学習済み症例の記憶を画質改善と誤認しません。
- 一人の成績を全施設へ一般化しません。