メインコンテンツへスキップ

AIを使った研究を正しく報告する

自分の道具や予測モデルを使った研究を、TRIPOD+AI・CONSORT-AI・SPIRIT-AIのどれで報告すべきかを見分け、方法にAIの使い方をどこまで書けば読み手が検証できるかを型として身につける。

  • レッスン 5 / 6
  • 9分

このレッスンで

終わる頃には、次ができるようになります

  • TRIPOD+AI・CONSORT-AI・SPIRIT-AIが対応する研究デザインを見分けられる
  • AIの使い方をMethodsに書くとき欠かせない項目を挙げられる
  • 自分の道具を使った研究を報告する前に確認すべき指針を選べる

前のレッスンまでで、道具のログを研究に見立て、計画書を書き、抄録からポスター、論文へと膨らませる流れを扱いました。あなたの道具がAIを使ったものだった場合、論文のMethodsには「何を使ったか」だけでなく「AIをどう使ったか」を書く必要があります。それを怠ると、査読の段階で差し戻されます。

なぜ専用の報告指針が要るのか

STROBEやCONSORTのような既存の報告指針は、AI特有の要素を想定して作られていません。モデルのバージョン、入力データの選び方、AIの出力を人間がどう判断に使ったか。これらは従来の指針にない情報で、書かなければ読み手は研究を再現も検証もできません。

この空白を埋めるために、2020年から2024年にかけて、研究デザインごとに3つの拡張指針が作られました。いずれも国際的な合意形成プロセス(Delphi調査・パネル会議・パイロット試験)を経て発行されています。

3つの指針、どれが自分の研究に当たるか

道具の使われ方によって、当てはまる指針が変わります。詳しい書誌情報は末尾の参考文献にまとめました。

3つの指針、どれが自分の研究に当たるか

1

TRIPOD+AI

予測モデルの開発・検証が対象。回帰・機械学習を単一チェックリストで扱う(2024年4月BMJ掲載)

2

CONSORT-AI

AIを使った介入の効果をRCTで検証した研究が対象(CONSORT 2010に14項目追加・2020年9月掲載)

3

SPIRIT-AI

CONSORT-AIの試験を実施する前に書くプロトコルが対象(SPIRIT 2013に15項目追加・CONSORT-AIと同時掲載)

見分け方は単純です。予測モデルそのものを作った・検証したならTRIPOD+AI。AIを使った介入を人に試してその効果を見る試験なら、計画書はSPIRIT-AI、結果報告はCONSORT-AIです。

名称の表記に注意する

設計段階の作業名は「TRIPOD-AI」でしたが、2024年に発行された正式名称は「TRIPOD+AI」です。ハイフンではなくプラス記号が付きます。EQUATOR Networkの現行掲載名もTRIPOD+AIで統一されています。一方でCONSORT-AIとSPIRIT-AIは、ベースになったCONSORT・SPIRITと同じくハイフン表記のままです。古い記事や下書き段階の資料に「TRIPOD-AI」という表記が残っていても、それは2024年の正式発行前の呼び方だと理解してください。

Methodsに何を書けば十分か

3つの指針は対象デザインが違いますが、AIの使い方を書かせる項目には共通の骨格があります。自分の道具を報告するとき、次の6点が揃っているかを確認してください。

Methodsに書く6点

1

AIの仕様とバージョン

種類・選定理由・構築の全ステップ(ハイパーパラメータ調整を含む)

2

入力データの取得・選定方法

データの出所・選び方。質が低い・欠損したデータの扱い

3

人間とAIの相互作用

入力・出力それぞれで人間がどこに関与したか

4

出力の意思決定への寄与

そのまま採用したか、参考情報として人間が最終判断したか

5

性能評価に用いた指標

識別能・較正など。クラス不均衡への対処の方法と根拠

6

第三者検証可能性

数式・コード・APIを第三者が実装・検証できる形で示せるか

この6点は、TRIPOD+AIの項目12c・12e・13・22・18f、CONSORT-AIの項目5(i)〜(vi)、SPIRIT-AIの項目11a(i)〜(vi)に相当します。実際に投稿する際は、該当する指針のチェックリスト原文で項目番号ごとに漏れを確認してください。

日本語資料の現在地

TRIPOD+AIには有志翻訳による日本語版(version 1.1、2025年3月19日作成)があります。一方でCONSORT-AI・SPIRIT-AIについては、ベースになるCONSORT 2010・SPIRIT 2013の日本語版はconsort-spirit.org上に存在するものの、AI拡張版の公式な日本語訳は同サイトに掲載されていません。ウェブ検索でも公式訳の存在は確認できませんでした。非公式の訳が別途あるかどうかまでは確認が取れていないため、[要確認: CONSORT-AI・SPIRIT-AIの非公式日本語訳の有無]としておきます。当面は英語の原文チェックリストに直接当たるのが確実です。

例で確認する(架空の設定)

架空の設定で当てはめてみます。外来の問診記録から重症度を予測するモデルを作り、自施設データで検証したなら、TRIPOD+AIの対象です。Methodsにはモデルの種類(ロジスティック回帰か勾配ブースティングか)、入力データの選び方、欠損データの扱い、感度・特異度などの評価指標、第三者が再現できる形を書きます。将来このモデルをRCTに組み込むなら、計画書はSPIRIT-AI、結果はCONSORT-AIです。

参考文献

  • Collins GS, Moons KGM, Dhiman P, et al. TRIPOD+AI statement: updated guidance for reporting clinical prediction models that use regression or machine learning methods. BMJ. 2024;385:e078378. DOI
  • EQUATOR Network. TRIPOD Statement(現行掲載ページ、TRIPOD+AIとして掲載)リンク
  • Liu X, Cruz Rivera S, Moher D, et al. Reporting guidelines for clinical trial reports for interventions involving artificial intelligence: the CONSORT-AI extension. Nat Med. 2020;26(9):1364-1374. DOI
  • Cruz Rivera S, Liu X, Chan AW, et al. Guidelines for clinical trial protocols for interventions involving artificial intelligence: the SPIRIT-AI extension. Nat Med. 2020;26(9):1351-1363. DOI
  • TRIPOD+AI Expandedチェックリスト 有志翻訳による日本語版 version 1.1(2025年3月19日)PDF

セルフチェック

1. 自分で作った予測モデルの開発と検証を論文として報告するとき、当てはまる指針はどれですか

2. TRIPOD+AIの正式名称の表記として正しいものはどれですか

3. AIの使い方をMethodsに書くとき、3指針に共通して求められる項目はどれですか

このレッスンは役に立ちましたか?