Multi-Criteria Decision Analysis (MCDA)のステップ

International Society for Pharmacoeconomics and Outcomes Research (ISPOR) 国際医薬経済・アウトカム研究学会の ISPOR MCDA Emerging Good Practices Task ForceがMCDAに関するガイダンスをReport 1およびReport 2として2016年に発表しています。

Steps in a value measurement MCDA process として8つのステップが挙げられています。Value measurementという言葉が用いられ、薬物療法の価値を定量的に評価するという意味だと思われます。

1.Defining the decision problem
2.Selecting and structuring criteria
3.Measuring performance
4.Scoring alternatives
5.Weighting criteria
6.Calculating aggregate scores
7.Dealing with uncertainty
8.Reporting and examination of findings

Report 2ではこれらに基づいたチェックリストも掲載されています。

診療ガイドライン作成のプロセスにおけるステップをこれらに対応してリストアップすると次の様になると思います。(これは、著者が作成したものです。)

1.Finding KCI and formulating CQ
2.Setting outcomes
3.Calculating effect estimates with SR
4.Comparing absolute effects
5.Setting importance of outcomes
6.Evaluating benefits and harms
7.Doing sensitivity analysis
8.Developing SoF and EtD framework with graphs

* KCI: Key Clinical Issue, CQ: Clilnical Question, SR: Systematic Review, SoF: Summary of Findings, EtD: Evidence-to-Decision . SoF、EtDはGrading of Recommendations, Assessment, Development and Evaluation (GRADE) approachに基づくステップです。

同じ概念を異なる言葉で表現しているため、異なる作業のようにみえますが、実際には同じ作業のものが多いです。しかし、4のscoringとabsolute effectsは同じではありません。6のaggregate scoresの計算と単なるbenefit-harmの評価も違います。

最近GRADE concept paperとしてDefining certainty of net benefitという論文が発表されています。この中で、アメリカUSPSTFの”certainty of net benefit”のことも引用されていますし、イギリスNICEのDecision Analylsisの活用についても触れられており、GRADE working groupもDecision modellingやDecision analysisについて検討中であると述べています。ただし、ISPORの論文は引用されていません。この論文で”A stepwise approach to determining the certainty of the net effect estimate”では以下のステップが記述されています。

1.Determine the outcomes to be combined.
2.Determine the quantified relative importance for each outcome.
3.Combine the importance-adjusted effect estimates.
4.Classify the precision of the net effect estimate.
5.Consider the certainty of effect estimates for outcomes that are critical to the likelihood of net benefit.
6.Determine if certainty of net benefit changes across a reasonable range of relative importance.

USPSTFの推奨Gradeについてはこの論文でも取り上げられていますが、MCDAという言葉は出てきません。しかし、複数の益と害のアウトカムに対する介入の効果を全体として定量的に評価することはMCDAそのものです。

Appendixとして、実例とnet effect estimateの計算法が紹介されていますが、効果推定値は”are expressed using the same units of measure”そして、”are independent and not correlated with each other”と制限がつけられています。価値関数という考えは取り入れられていません。

また、”Classification of precision of net effect estimate”ではNet benefit, Likely net benefit, Possible net benefit, Possibly no net benefit or harm, Net benefit or harm likely near zero, Possible net harm, Likely net harm, Net harmに分類しています。それぞれが、High certainty of net benefit, Moderate certainty of net benefit, Low certainty of net benefit, Very low certainty of net benefit or harm, Moderate certainty of little net benefit or harm, Low certainty of net harm, Moderate certainty of net harm, High certainty of net harmに対応するそうです。

References:
1. Thokala P, Devlin N, Marsh K, Baltussen R, Boysen M, Kalo Z, Longrenn T, Mussen F, Peacock S, Watkins J, Ijzerman M: Multiple Criteria Decision Analysis for Health Care Decision Making–An Introduction: Report 1 of the ISPOR MCDA Emerging Good Practices Task Force. Value Health 2016;19:1-13. PMID: 26797229
2. Marsh K, IJzerman M, Thokala P, Baltussen R, Boysen M, Kaló Z, Lönngren T, Mussen F, Peacock S, Watkins J, Devlin N, ISPOR Task Force: Multiple Criteria Decision Analysis for Health Care Decision Making–Emerging Good Practices: Report 2 of the ISPOR MCDA Emerging Good Practices Task Force. Value Health 2016;19:125-37. PMID: 27021745
3.Alper BS, Oettgen P, Kunnamo I, Iorio A, Ansari MT, Murad MH, Meerpohl JJ, Qaseem A, Hultcrantz M, Schünemann HJ, Guyatt G, GRADE Working Group: Defining certainty of net benefit: a GRADE concept paper. BMJ Open 2019;9:e027445. PMID: 31167868

SELFIE project

SELFIEは複数の疾患を抱える人たちを経済的面も含めて持続可能なより良いケアを提供しようというEUのオランダ、オーストリア、クロアチア、ドイツ、ハンガリー、ノルウェー、スペイン、英国の多国間共同プロジェクトだそうです。

SELFIE (Sustainable intEgrated chronic care modeLs for multi-morbidity: delivery, FInancing, and performancE) is a Horizon2020 funded EU project that aims to contribute to the improvement of person-centred care for persons with multi-morbidity by proposing evidence-based, economically sustainable, integrated care programmes that stimulate cooperation across health and social care and are supported by appropriate financing and payment schemes.

論文も発表されており、全文が公開されています。Rutten-van Mölken M, et al: Strengthening the evidence-base of integrated care for people with multi-morbidity in Europe using Multi-Criteria Decision Analysis (MCDA). BMC Health Serv Res 2018;18:576. PMID: 30041653

臨床研究の多国間プロジェクトの進め方として、また研究目標の設定、益と害の解析方法など参考になる点が多々あると思います。

FDAのBenefit-Risk Assessment(続き)

The Food and Drug Administration Safety and Innovation Actが2012年に発効し、その Section 905はFDAのCenter for Drug Evaluation and Research (CDER) に対して新薬の承認にあたり、構造化されたbenefit-risk assessment frameworkを実施することを求めることになりました。 2018年CDERは、Benefit-Risk Assessment in Drug Regulatory Decision-Making. Draft PDUFA VI Implementation Plan (FY 2018-2022)を発表しています。こちらからダウンロードできます。

さらに、同じく2012年に, FDAのCenter for Devices and Radiological Health (CDRH) はGuidance to clarify the principal benefit-risk assessmentというガイダンスを発表し、“patient tolerance for risk and perspective on benefit”すなわち「患者のリスクに対する許容度とベネフィットに対する視点を承認のレビューの際に追加のファクターとして考慮することを発表しました。その後、CDRHは2013年Patient Preference Initiativeというプロジェクトを開始し、Medical Device Advisory Committee (MDAC) に患者のパネルの参加について方針を定めたそうです。 CDRHのMedical Device Innovation Consortium MDICは、The MDIC Patient Centered Benefit-Risk (PCBR) Projectを2013年に開始し、MEDICAL DEVICE INNOVATION CONSORTIUM (MDIC) PATIENT CENTERED  BENEFIT-RISK PROJECT REPORT: A Framework for Incorporating Information on Patient Preferences Regarding Benefit and Risk into Regulatory Assessments of New Medical Technologyという報告書を2015年に発行しました。こちらからダウンロードができますが登録が必要。

CDRH Patient Engagementも見てください。いろいろな資料が掲載されています。Patient and Public Involvementも重要な課題です。

論文としては、
Johnson FR, Zhou M: Patient Preferences in Regulatory Benefit-Risk Assessments: A US Perspective. Value Health 2016;19:741-745. PMID: 27712700が発表されています。 Role of Patient Preferences患者の選好の役割については、”Weighing benefits and risks of new health technologies requires not only assessing the available scientific evidence but also making societal value judgments about the relative importance of benefits and risks measured in different, noncomparable units.” と記述されており、単なる効果推定値の値、すなわち効果の大きさと不確実性だけでなく、価値観に基づく、ベネフィットとリスクの評価が必要なことが述べられています。この文章を読むだけで、①ランダム化比較試験などで得られた科学的エビデンスの評価だけでは、ベネフィットとリスクの評価はできない、②ベネフィットとリスクの相対的な重要性に関する社会的な価値判断が必要、③ベネフィットとリスクは比較ができない異なる尺度で測定が行われている、ということが分かります。

さらに、
Ho M, Saha A, McCleary KK, Levitan B, Christopher S, Zandlo K, Braithwaite RS, Hauber AB, Medical Device Innovation Consortium’s Patient Centered Benefit-Risk Steering Committee: A Framework for Incorporating Patient Preferences Regarding Benefits and Risks into Regulatory Assessment of Medical Technologies. Value Health 2016;19:746-750. PMID: 27712701 には具体的な手法について記述されています。この論文の中にMDIC’s Preference Assessment Methodology Catalogがあり、Table 2-List of methods included in the Catalog には、Prefrence選好の評価法に関してさまざまな方法がまとめられています。

表2-カタログに含まれる方法のリスト

グループ 方法
Structured weighting
構造化された重みづけ
Simple direct weighting 単純直接重みづけ
Ranking excercises ランキングエクササイズ
Swing weighting スウィングウェイティング
Point allocation ポイント配置
Analytic hierarchy process 分析的階層法
Outranking methods アウトランキング法
Health-state utility健康状態効用Time trade-off 時間得失法
Standard gamble 標準賭け法
Stated preference表明選好Direct-assessment questions 直接評価質問
Threshold technique 閾値テクニック
Conjoint analysis and discrete-choice experiments コンジョイント分析および離散選択分析
Best-worst scaling exercises 最善最悪スケーリングエクササイズ
Revealed preference
顕示選好
Patient preference trials 患者選好試験
Direct questions in clinical trials 臨床試験における直接質問

FDAもEMAもほとんど同じ考え方で定量的なベネフィットとリスクの評価法Quantitative Benefit-Risk Assessmentを模索してきたことが分かります。

診療ガイドライン作成時に益と害の評価をどのように行うかは重要なテーマですが、”効果推定値の大きさと不確実性”と”益と害の大きさとバランスの不確実性または正味の益の不確実性”は同じではないということを認識する必要があります。益と害の評価には価値観が関係します。また、これはComparative Effectiveness Research (CER)の理解とも関係します。なお、リスクRiskは害Harmと同じ意味で用いられています。また、PreferenceとValueも同じ意味で用いられています。

前の投稿FDAのBenefit-Risk Assessment Frameworkはこちら

IMI PROTECTとPPI

PPIとはPatient Public Involvementのことですが、医薬品のベネフィット・リスク評価における患者・市民の参画についてEUではかなり議論が進んでいます。

Innovative Medicines Initiative (IMI) 
 Innovative Medicines Initiative (IMI)革新的医薬品イニシアティブはEUとヨーロッパ製薬企業のパートナーシップですべての人の健康と幸福のための個別化医薬の、特に医療ニーズに十分応えられていない領域での、開発とそれらへの患者さんのアクセスを促進する研究におけるオープンなコラボレーションを促進する活動をしています。

 IMI2期プログラム(2014-2020年)を通じ約4100億円(33億ユーロ)の予算が用意されました。IMIのゴール、特に第2期(IMI2, 2014-2020)は次の世代のワクチン、新しい抗生物資のような、医薬品、治療法を開発することだそうです。

Pharmacoepidemiological Research on Outcomes of Therapeutics by a European Consortium (PROTECT) 
 治療アウトカムに関する薬剤疫学的研究ヨーロッパコンソーシアムは革新的医薬品イニシアティブ(IMI)の下で作られたプロジェクトで、医薬品の副作用をさまざまなデータソースから早期に検出し評価することを促進する一連の革新的ツールと方法を開発し、ベネフィットとリスクに関するデータの統合と提示を可能にすることを目的としています。

ベネフィットとリスクとはベネフィットとハームつまり益と害と同じ意味です。診療ガイドライン作成で介入の益と害をシステマティックレビューで明らかにするのとほとんど同じ事をすることになります。

 PROTECTは34の民間および公的パートナーの間の共同作業であり、欧州医薬品局のもとで連携しています。PROTECTでは計6つのワークパッケージが成果として発表されており、それぞれ異なる領域に焦点が当てられています。

さて、
The patient and public involvement (PPI)患者・市民の参画についてはWork Package Five (WP5)で取り扱われています。IMI PROTECT Benefit-Risk Group PAATIENT AND PUBLIC INVOLVEMENT REPORT version 1.0  Recommendations for Patient and Public Involvement in the assessment of benefit and risk of medicines. (Team leader Kimberley Hockley, Imperial college London). (PDF file)

Patient Public Involvement (PPI)の定義
Patient and public: 
”患者と市民”とは、臨床試験への参加者、患者および将来患者になりうる者、障害者、両親と保護者、健康サービス・社会福祉サービスの利用者、介護者、一般市民メンバー、これらの人々の利益を代表する組織。

Involvement:
”参画”とは、患者、市民と意思決定にあたる規制当局の間の能動的なパートナーシップであり、患者と市民を意思決定の対象者として扱うことではない。患者・市民の参画とは患者・市民とともになされるあるいは患者・市民によってなされる意思決定と定義され、患者・市民へ、に関して、あるいは、のための意思決定という意味ではない。

これらの定義はイギリスのNational Health Service (NHS)国民健康サービスにおけるより多くの市民参加をサポートしている全国規模のアドバイザリーグループであるInvolveから採用したそうです。

この報告書では、PPIが重要な場面として、a) 関連するアウトカム測定の選択、採用、除外、b)アウトカム測定の順位付けと重みづけ、が挙げられています。For example, PPI may be considered important during (a) the selection, inclusion and exclusion of relevant outcome measures, or (b) the ranking and weighting of outcome measures