Development and Validation of OlivePICO: A Browser-Based Pre-Screening Tool for Reducing Title and Abstract Screening Burden in Systematic Reviews
OlivePICOは、構造化されたPICOドメインのマッチングを利用することで、非構造的なキーワードフィルタリングと比較して高い感度を維持しつつプロトコルの適合性を向上させ、系統的レビューにおけるタイトルおよび抄録のスクリーニング負担を大幅に軽減する、無料のブラウザベースのプレスクリーニングツールです。
原論文は CC BY 4.0 (https://creativecommons.org/licenses/by/4.0/) でライセンスされています。 これは以下の論文のAI生成解説です。著者が執筆または承認したものではありません。技術的な正確性については原論文を参照してください。 免責事項の全文を読む
現代医学の世界において、ある治療法や疾患を理解するための最も信頼できる方法は、その主題に関して書かれたあらゆる研究をすべて集め、それらをまとめて検討することである。システマティック・レビューとして知られるこのプロセスは、エビデンスの黄金律（ゴールドスタンダード）とされる。しかし、医学研究の量は膨大なレベルにまで爆発的に増加しており、この作業は圧倒的なものとなっている。単一のレビューであっても、世界のデータベースから容易に数万件もの記録を抽出することがある。研究者が、その研究が自身の問いに答えているかどうかを確認するために全文を読む前に、まずこれら数千件の論文すべてのタイトルと、アブストラクト（要旨）と呼ばれる短い要約を読まなければならない。この初期スクリーニングは時間がかかり、コストがかかり、心身を消耗させるものであり、実際に重要な数十件の研究を見つけ出すためだけに、チームが関連のない資料の読み込みに数ヶ月を費やすことも珍しくない。
これを解決するために、研究者たちは山積みの資料を分類するのを助けるソフトウェアを使い始めているが、これらのツールの多くは高価であったり、操作に複雑な技術的スキルを必要としたりする。OlivePICOと呼ばれる新しいツールは、異なるアプローチを提示している。これは、人間によるスクリーニングが始まる前にスマートなフィルターとして機能する、無料のブラウザベースのアプリケーションである。単にランダムなキーワードを探すのではなく、PICOと呼ばれる構造化された手法を用いる。PICOとは、Population（対象者）、Intervention（介入）、Comparator（比較対象）、Outcome（結果）の頭文字をとったものである。このフレームワークにより、ソフトウェアは研究上の問いに含まれる具体的な「材料」を理解することができる。すなわち、その研究が誰についてのもので、どのような治療がテストされ、何と比較され、どのような結果が測定されたのかである。タイトルやアブストラクトの中でこれらの具体的な材料を照合することで、このツールは「脱穀（だっこく）」のように、有望な記録を素早く選別し、それ以外を自動的に脇に置くことができる。
OlivePICOの開発者であるMohammad Sayeed Syed氏とJehath Syed氏は、このツールが完全にウェブブラウザ内で動作するように構築した。つまり、インストールもサブスクリプション料金も不要であり、リモートサーバーにデータをアップロードする必要もない。プロセスは単純である。研究者は数千件の記録のリストをアップロードし、特定のPICO基準を定義し、社説や症例報告を除外するといった除外ルールを設定する。その後、ソフトウェアはすべての記録をスキャンする。もし研究が要求された対象者と結果に一致していれば、レビュー対象としてフラグが立てられる。一部の基準には一致するがすべてには一致しない場合は、後で人間が確認するための「不確実」としてマークされる。明らかに適合しない場合は、除外される。また、このシステムには、公式に撤回された記録を自動的に検出し分離する安全機能も備わっており、欠陥のある研究が誤って最終的なプールに混入することを防いでいる。
このツールが実際に機能するかどうかを確認するため、チームは高齢者の処方薬減量（デプリスクライビング）に関する完了済みのレビューを用いてテストを行った。このテストにおいて、ツールは人間によるチームが元々含めていた16件の研究すべてを特定することに成功し、完全な感度（sensitivity）を達成した。ツールが単に運が良かっただけではないことを確認するため、彼らはソフトウェアによって拒否された研究のサンプルをランダムにチェックした。その結果、拒否された150件の研究のうち、保持されるべきであったものはわずか1件のみであり、エラー率は許容範囲内といえる非常に低いものであった。その後、研究者たちはOlivePICOを、高齢者の転倒に関する2つの新しい独立したレビューに投入し、より単純で構造化されていないキーワード照合を用いたカスタムメイドのコンピュータプログラムと比較した。
結果は、品質の明確な違いを示した。最初のレビューでは、カスタムのコンピュータプログラムは実際には関連のない膨大な数の追加記録を人間に送ったが、OliveP訳PICOははるかに少ない数を送った。より重要なことに、研究者がOlivePICOのみが見つけた記録を確認したところ、そのうちの約3分の2が研究に関連するものであった。対照的に、カスタムプログラムのみが見つけた記録は、ほとんどが関連性のないものであった。2番目のレビューでも同様のパターンが見られた。OlivePICOは、他のツールが見逃した関連性の高い研究を高い割合で捉えた一方で、もう一方のツールはOlivePICOが逃した関連する研究をほとんど捉えられなかった。このことは、構造化されたPICOアプローチが、単純なキーワード検索よりも研究の文脈を理解する上ではるかに優れていることを示唆している。
また、この研究は、ツールが現実世界の「乱雑さ」にどのように対処するかについても強調した。例えば、このソフトウェアは、医学データベースとは異なるフォーマットを使用するエンジニアリング・データベースからのデータも、特別な調整なしに正常に処理できた。さらに、ツールを洗練させることが可能であることも実証された。初期テストにおいて、キーワードリストに特定の用語が欠けていたために研究が見逃された場合、研究者がその用語を追加するだけで、ツールは即座に改善された。このように監査および調整が可能であるという性質は、意思決定プロセスが「ブラックボックス」である一部の人工知能システムとは異なり、プロセスを透明なものにしている。研究者たちは、OlivePICOが高品質な医学的エビデンスに求められる徹底さを損なうことなく、研究チームの作業量を大幅に削減し、真に重要な研究に人間の努力を集中させることを可能にする、実用的で無料のソリューションであると結論づけている。
自分の分野の論文に埋もれていませんか？
研究キーワードに一致する最新の論文のダイジェストを毎日受け取りましょう——技術要約付き、あなたの言語で。