医療AIラボ|無料ツール

診断精度研究の症例数設計

AIや検査の感度・特異度を調べる研究で、「何例集めれば、どのくらいの精度で言えるか」を計算します。計画を立てるときにも、論文の症例数が十分かを見るときにも使えます。

  • 有病率まで含めて計算
  • 二項検定は厳密な検出力で確認
  • 計算結果をPythonで照合済み
まず試してほしいこと 下の「1. 決めた幅で推定する」で、有病率を 10% から 2% に変えてみてください。必要な陽性の症例数は同じなのに、集めなければならない全体の症例数は5倍になります。検診のように病気の人が少ない場面で、検証がむずかしくなる理由です。

1. 決めた幅で推定する感度・特異度を「±何%」で示したいとき

想定する感度・特異度と、許容できる95%信頼区間の幅(片側)を入れてください。有病率は、症例を集める集団での割合です。

例を入れる:

有病率が下がるほど、必要な全体の症例数は急に増えます。陽性の症例を別に集める(症例対照の形にする)と数は減らせますが、その場合は的中率をそのままでは求められなくなります。

2. 手元の症例数で示せること症例数が先に決まっているとき・論文を読むとき

全体の症例数と有病率から、想定どおりの結果が出たときの95%信頼区間を計算します。論文に書かれた症例数を入れると、その研究の数字がどのくらい確かなのかの目安になります。

3. 最低水準を上回ることを示す「感度は少なくとも80%ある」と言いたいとき

「感度がこの水準を下回るなら使えない」という最低水準と、実際に期待している値を入れてください。期待どおりの性能があるときに、最低水準を上回ると示せる確率(検出力)が目標に届く症例数を求めます。特異度について調べたいときは、「陽性」を「陰性」に読み替えてください。

考え方

感度の精度は「陽性の症例数」で決まる

感度は「陽性の症例のうち、正しく陽性と判定できた割合」なので、精度を決めるのは全体の症例数ではなく、陽性の症例数です。全体で1,000例を集めても、陽性が20例しかなければ、感度の信頼区間はとても広くなります。同じように、特異度の精度は陰性の症例数で決まります。

有病率が低いと、全体の症例数が膨らむ

陽性が100例必要で、有病率が10%なら全体で1,000例、有病率が2%なら5,000例を集めることになります。論文を読むときは、全体の症例数だけでなく、陽性が何例あったかを確認してください。信頼区間の見方は、医療AI評価ワークベンチで実際のデータを使って確かめられます。

「推定する」と「上回ることを示す」は別の計画

「感度を±5%の幅で示す」(上の1)と、「感度が80%を上回ると示す」(上の3)は、目的が違うため、必要な症例数も違います。後者では、期待する値と最低水準の差が小さいほど、多くの症例が必要になります。

計算方法

  • 1. 決めた幅で推定する:正規近似による式 n = z² × p(1−p) ÷ d²(z=1.96、p=想定する感度または特異度、d=信頼区間の片側の幅)。全体の症例数は、陽性の症例数 ÷ 有病率、陰性の症例数 ÷(1 − 有病率)の大きいほうです(Buderer, 1996 の方法)。
  • 信頼区間:Wilsonのスコア法による95%信頼区間。
  • AUCの信頼区間:Hanley & McNeil(1982)の標準誤差の式による近似。スコアの分布によって実際の幅は変わるので、目安としてご利用ください。
  • 3. 最低水準を上回ることを示す:片側2.5%の二項検定。症例数は、正規近似の式の値と、二項分布で厳密に計算した検出力が目標以上になる最小の値(その後の20例でも下回らないもの)の両方を示します。二項分布は取りうる値がとびとびなので、症例数を増やしても検出力がいったん下がることがあるためです。

計算結果は、本ツールとは別に書いたPythonのプログラム(二項分布は分数による厳密計算)と突き合わせ、一致することを確認しています。

注意と限界

  • ここで求めるのは、計画を立てるための目安です。実際の研究では、判定不能例や脱落、複数の読影者、施設間の違い、多重比較なども考える必要があります。研究計画書に書く症例数は、統計の専門家に確認してください。
  • 想定する感度・特異度が実際と違えば、必要な症例数も変わります。想定を少し悪い側に置いて計算しておくと、余裕を持てます。
  • このツールは学習と研究の補助を目的としており、診断・治療の判断や、製品の性能を保証する目的には使えません。
スポンサーリンク

本ツールの数値例は、説明のために置いた仮の値です。実在の検査・製品の性能を示すものではありません。ご利用は免責事項をご確認のうえ、ご自身の判断でお願いします。不具合や要望はお問い合わせからお知らせください。