前の記事の終わりに、私はこう書いた。プログラム評価を、記述ではなく検証として設計できる人が、この分野には足りない、と。
書いた直後から引っかかっていた。本当にそうなのか。「足りない」と言うためには、何が足りないのかを特定しなければならない。それを調べたのが、この記事である。
結論から言うと、私の書き方は不正確だった。ただし公開時の本文はここで「足りないのは設計の知識ではなかった」と書き、これも不正確だった※訂正。正しくは——研究デザインそのものが世界的に未確立なのではない。しかし日本には、その方法論を実際に使える研究者、時間、データ、研究ネットワークが足りていない。
この区別が、この記事の主題である。「デザインを知っている」ことと、「そのデザインが要求する情報量を供給できる研究基盤がある」ことは、別のことだ。
「デザインが未確立」という言い方は、何を指しているのか
まず、この分野について繰り返し語られる「研究デザインが不明瞭」「研究の方法論が確立していない」という言い方の出所を探した。
公開時の本文はここに「見つからなかった」「出典がない」と書いた。これは強すぎる※訂正。一般的な量的・質的研究法が存在しないという意味で方法論が未確立だ、と述べた資料は確かに見当たらない。だが後述するように、2014年の家庭医療学の総説は家庭医療固有の研究課題と、それに適した方法論体系をさらに確立する必要を明示的に論じている。「出典がない」と一刀両断にはできない。
日本専門医機構の総合診療専門研修プログラム整備基準——専門研修の内容を規定する制度文書——を全文検索すると、到達目標の「2.研究」にこう書かれている1。
1)日々の臨床の中から研究課題を見つけ出すという、総合診療や地域医療における研究の意義を理解し、症例報告や臨床研究を様々な形で実践できる。 2)量的研究、質的研究双方の方法と特徴について理解し、批判的に吟味でき、各種研究成果を自らの診療に活かすことができる。
制度は、研究デザインを確立済みの前提で書いている。方法論が未確立であるという記述は、この文書のどこにもない。
ただしこれは「専攻医に何を学ばせるか」という到達目標であって、日本の総合診療界に研究デザインの知識が行き渡っている証拠ではない※訂正。後述するRouyardらは、日本のプライマリ・ケア研究の第一の障壁として「too few GPs have formal research training」——正式な研究トレーニングを受けたGPが少なすぎる——を挙げている2。到達目標に書いてあることと、それが実装されていることは違う。
では、実際には何が起きているのか。一次資料で裏づけが取れたのは、まったく別の三つだった。
実際に起きていること①——量が、桁で違う
Rouyard らが、2015年以降に国際的な査読誌に発表された、プライマリ・ケア環境での無作為化比較試験を国別に数えている。人口1000万人あたりに標準化した値2。
Australia—23.2; United Kingdom—20.5; Canada—13.2; Germany—4.0; Japan—0.3
オーストラリアの77分の1である。ドイツと比べても13分の1。
ただしこの0.3は「日本で行われたRCTの総数」ではない※訂正。2015年以降・国際的な査読誌に掲載・著者らが定義するプライマリ・ケア環境という条件を満たす試験を、人口1000万人あたりに標準化した研究アウトプットの指標である。実数として著者らが日本で同定したのは4件である。公開時の本文は「これは質の話ではない。存在するかしないかの話だ」と書いたが、正確には——少なくともこの定義で見た研究アウトプット量に、約77倍の差がある、である。
そしてRouyardらは、この差の原因として障壁を名指ししている。第一に挙がるのが、先に引いた正式な研究トレーニングを受けたGPの少なさと、研究に割ける時間の不足である。
もう一つ、国内の数字がある。小松鉾と矢吹が、2010〜2012年の日本プライマリ・ケア連合学会学術大会の演題1,003件を追跡し、査読誌に掲載されたものを数えた3。
Of 1003 abstracts, 38 (3.8%, 95% CI 2.6% to 5.0%) were published in a peer-reviewed journal indexed in the MEDLINE database.
他国のプライマリ・ケア学会は40%を超える。そして著者らはこう書いている——「to our knowledge, the abstract publication rate observed in the present study was the lowest among all studies conducted in past decades, regardless of specialty」。診療科を問わず、過去数十年で最も低い。
なおこれは2010〜2012年の大会を対象とした数字である※訂正。2026年の現在形として使える値ではない。
ここで重要なのは、著者らが説明を四つ検討し、いずれも観察された低率を十分には説明しないと考察していることである。言語の壁か——整形外科学会では日本語でも差が出ないので「unlikely」。無作為化比較試験が少ないからか——非RCTでも他国は40%を超えるので「does not fully account」。抄録の質か——「also unlikely」。時間がないからか——複数演題を出すような活発な著者でも4.3%にとどまるので「a lack of time also seems unlikely to explain our findings」。(公開時の本文は「すべて否定している」と書いたが、原文はいずれも断定的な否定ではなく、十分な説明にならないという考察である。)
結論は、こうである。
other unknown predictive factors might strongly affect the abstract publication rate
原因は分かっていない。日本のプライマリ・ケア研究について最も引用される数字が、説明のつかない数字として置かれている。
実際に起きていること②——2014年、日本語の設計ガイダンスが乏しかった
「デザインが未確立」に最も近い実在の言明は、2014年の総説にあった。クラブトリーらが日本プライマリ・ケア連合学会誌に書いている4。
家庭医療学が日本で専門分野として認知されるためには、独自の研究課題やそれに適した研究法を確立することが必須である。しかし、家庭医療学研究をデザインするにあたってのガイダンスとなる日本語文献はほとんど存在しない。
主語をよく見たい。存在しないのはデザインではなく、日本語で書かれたガイダンス文献である。設計の方法は世界にある。それを日本語で読める形にした案内が薄い。
ただし公開時の本文は、ここを「まったく別の問題だ」と切り離しすぎていた※訂正。同じ引用の前半は「独自の研究課題やそれに適した研究法を確立することが必須である」と述べている。一般的な研究法が存在しないという意味ではないが、家庭医療固有の研究課題と、それに適した方法論体系をさらに発展させる必要は、この総説が明示的に論じていたことである。
そして、これは2014年時点の話である。2026年5月、学会はプライマリ・ケア研究の報告ガイドライン CRISP(Consensus Reporting Items for Studies in Primary Care)の日本語版を公開している。研究支援委員会を中心とした11名の翻訳チームによるものである5。「日本語の設計図がない」を現在形で書くことは、もうできない。
実際に起きていること③——規模が、小さい
三つ目が、いちばん具体的だった。学会の研究支援の規模である。
日本プライマリ・ケア連合学会の2026年度研究助成制度の募集要項を読むと、こうある6。個人研究は「助成件数 年間3件まで」「助成金額 1件当たり年間20万円」。チーム研究は「年間2件まで」「1件当たり年間20〜40万円」。
公開時の本文はここを「1年に配る研究助成の総額は、上限まで使っても200万円前後」と書いたが、数字を整理し直す※訂正。個人研究3件×20万円=60万円。チーム研究は1件あたり年20〜40万円を2年間なので、単年度に支出しうる上限は60+80=140万円、新規採択分に対する総コミット額の上限が60+160=220万円(うちチーム分は2年度に分割)である。
そしてこれは学会の研究関連予算の全体ではない。学会は研究助成のほかにPR3ネットワーク、研究人材育成、英文誌の支援など複数の研究支援制度を運営している。読み方としては——この学会が「個々の研究計画に直接配る助成枠」は、新規採択ベースで年220万円が上限である、が正確である。
人材育成の側も見た。2017年度に始まった「未来研究リーダー人材育成プロジェクト」は三コース制で、オンライン講義中心の研究基礎コースが定員10名、指導拠点について実際に研究を行う研究実践Aコースが定員1名、研究実践Bコースは募集停止中7。
ただし「年に1人」を、学会の研究人材育成全体の規模として読ませるのは正確でない※訂正。基礎コースは定員10名であり、Bコースにも過去の実績がある。言えるのは、指導拠点について長期の個別指導を受ける「研究実践Aコース」の募集規模が、定員1名ときわめて小さい、ということである。
そして、2013年から2019年にかけて「臨床研究デザイン道場」というワークショップが開かれていた。焦点はリサーチ・クエスチョンの構造化——研究設計のいちばん最初の一歩だ。現行の学会サイトに、このページは存在しない。
明るい材料もある。2025年、学会が全国規模の実践研究ネットワーク PR3 Network を正式プロジェクトとして立ち上げた。第一弾は心不全と多疾患併存のレジストリ研究で、2026年1月時点で60施設以上・150名以上が参加している8。
なお公開時の本文は「ようやく、である」と書いたが、これは日本初のPBRNではない※訂正。JADECOM-PBRN(地域医療振興協会、2018年6月設立)やCFMD-PBRNが先行している。PR3の新規性は、学会自身が主導する全国規模のPBRNであるという点にある。
島根の数字を、自分で組み直してみた
ここまでが状況の整理である。しかし「研究基盤が弱い」という話は、この連載で何度も書いてきた。今回やりたかったのは、それが具体的にどう効くのかを一つの例で見ることだった。
前の記事で扱った島根大学の論文を使う。日本専門医機構は都道府県別・領域別の専攻医採用数を毎年公表している。この9年分のPDFから、全47都道府県の数字を抜き出した9。論文が使ったのと同じ公開データである。
そして、都道府県と年の固定効果を入れたポアソン回帰で、差分の差分を推定した。島根の総合診療シェアが、センター設立(2021年)を境に、全国の趨勢が予測する水準からどれだけ離れたか。
点推定は大きい。島根の伸びは、全国トレンドが予測する水準の1.8倍である。だが信頼区間は1をまたぐ。介入開始年を2020年、2022年、2023年のどこに置いても同じだった。
ここで、公開時の本文がこの95%信頼区間を扱いすぎていた点を訂正する※訂正。介入が割り当てられた単位は都道府県であり、処置群のクラスタは島根県ただ一つである。差分の差分では通常、政策が割り当てられた単位のレベルで県内の系列相関を考慮するが、処置クラスタが1つしかない状況では、通常のクラスタ頑健推論そのものが壊れることが古くから知られており、Conley–Taber法やランダム化推論といった少数処置群専用の方法が別に研究されている。準ポアソンの分散比1.07が示すのは過分散が小さいことであって、県内の時系列相関を処理できていることではない。
したがってこの区間は、通常の準ポアソン回帰による参考値であり、差分の差分としての厳密な推論には適さない。この記事の論旨は、p値がつくかどうかにはない。
なぜ有意にならないのか
ここが、この記事でいちばん書きたかったところである。対数スケールの分散を分解した。
| 由来 | 分散への寄与 | 割合 |
|---|---|---|
| 島根の介入前(8件) | 0.1250 | 79.7% |
| 島根の介入後(34件) | 0.0294 | 18.7% |
| 他46県の介入前(577件) | 0.0017 | 1.1% |
| 他46県の介入後(1,297件) | 0.0008 | 0.5% |
この分解が何の分解なのかを、公開時の本文は書いていなかった※訂正。これは単純な4セルのポアソン率比を対数変換したときの分散近似(1/8+1/34+1/577+1/1297)における寄与であって、固定効果を入れた回帰全体の分散分解ではない。
正確に書けば——単純な差分の差分の率比をポアソン近似した場合、対数率比の標準誤差を構成する分散の約8割は、島根の介入前8件という小さいセルに由来する。
アウトカム側ではない。ベースライン側である。島根は介入後に34人を集めた。それは十分な数だ。しかし比較の相手である「介入前の島根」は、8人しかいない。8人から測った基準線の上には、どんな結論も立たない。
介入前が3年・8件しかない、ということ
では、なぜ介入前が8人しかいないのか。
島根の「介入前」とは2018〜2020年度である。そして2018年度は、総合診療専門医制度が日本で始まった最初の年だ。島根県の総合診療専攻医は、その年ゼロだった。
試しに介入開始を2019年に置いて計算しようとすると、割り算が成立しない。分母がゼロだからである。
公開時の本文は、ここから「新しい専門領域は、構造的に前後比較を使えない」と一般化した。これは行き過ぎである※訂正。
新しい領域でも前後比較はできる。今回問題なのは、この事例に固有の、短くて疎なベースラインである——制度開始が2018年、介入が2021年で介入前期間が3年しかなく、しかもそこにイベントが8件しかない。原理的に不可能なのではなく、この条件では因果推論がきわめて不安定になる、である。
「ゼロだから割り算できない」も同じである。それは率比という効果指標を選んだから起きる。率差なら0からでも計算できるし、ポアソンやベイズのモデルという選択肢もある。正確には——ゼロを含むと、乗法的な効果指標では推定が不安定になる。
並行トレンドについても補足しておく。介入前3年では並行トレンドの妥当性を十分に評価できない、という認識自体は正しい。ただし期間が長ければ並行トレンドを「証明」できるわけでもない※追記。事前トレンド検定には検出力の問題があり、検定を通過したことを条件に推論すると別の歪みが生じうることが指摘されている。事前トレンド検定だけで識別仮定を保証することはできない。
前の記事で私は、島根が15.8%という単年の値を8年加重平均の全国値と対置していることを指摘した。あれは処理の問題だった。今回見えたのはもっと深い層で、仮に完璧に処理しても、この設計では結論が出ない。
では、何を報告すればよかったのか
ここで、医学教育研究の側から出てきた枠組みが効いてくる。Cook・Bordage・Schmidt の三分類である10。
- Description——「What was done?」を問う。比較群を持たない。
- Justification——「Did it work?」を問う。比較はあるが、結果によって確認も反証もできる概念的枠組みを欠く。
- Clarification——「Why or how did it work?」を問う。結果によって確認または反証されうる概念的枠組みを持つことが特徴。
彼らの診断は、この記事の主題そのものである。
research in medical education still suffers from a more fundamental and apparently widespread problem, namely, the lack of a scientific approach. By this we are not implying the absence of scientific study designs and methods, for many studies employ rigorous designs. Rather, we have noted that many research studies fail to follow a line of inquiry that over time will advance the science in the field.
設計法がないのではない。探究の線が続いていないのだ。彼らは同時に「It would be a misuse of the classification if it were the sole criterion by which to grade existing research」とも明記していて、記述研究を否定しているわけではない。
島根の論文は自らを “A Descriptive Program Evaluation” と名乗っている。Description として正直である。要旨も最終的には「associated with」「promising approach」という慎重な語を選んでおり、限界の項では「this descriptive analysis cannot establish causal relationships」と明記している11。
したがって「記述研究なのに因果推論をした」と断じるのは、公開時の本文の書きすぎだった※訂正。考察の該当箇所は「the observed improvements cannot be readily attributed to enhanced financial incentives or major structural reforms but rather to the programmatic components of the generalist network」——観察された改善は財政的誘因や大きな構造改革にではなく、ネットワークの構成要素に帰属させうる——である。問うべきは断罪ではなく、記述的評価という設計に対して、考察での機序の解釈がどこまで許されるのかという線引きの方である。
そして、Description のままでも報告できたことがある。三つ挙げたい。
第一に、人時である。私が計算したところ、42名の総追跡は136.5人年、中央値2.8年、範囲0.8〜6.8年。40.5%(17名)が追跡2年以下で、5年以上は8名しかいない。88.1%という比率は、この分布を一つの数字に潰したものだ。Cochrane のハンドブックは、時間を伴うデータを二値として扱う条件をこう定めている12。
Time-to-event data can sometimes be analysed as dichotomous data. This requires the status of all patients in a study to be known at a fixed time point.
CDCの教材はさらに直截で、追跡が揃わないときに割合を使うと「The incidence proportion underestimates the true rate because it ignores persons lost to follow-up」と述べる13。
ここで公開時の本文は「離脱5名を人年で割れば3.7/100人年」と計算した。この計算は成立しない※撤回。人時の分母は、各人が実際に観察されリスク下にあった時間の合計でなければならない。ところが論文が公表しているのは「2026年1月時点で37/42名がネットワーク内に勤務」という一時点の状態であり、5名がいつ離脱したのかが分からない。2019年に加入して2020年に離れた人を2026年まで分母に算入することはできない。離脱日のない公開データから、正しい残留率は再構成できない。
そしてこれこそが、この節でいちばん言いたかったことである。本当に必要なのは人時だが、論文は各人の加入日と離脱日を提示していないため、読者の側では正しい残留発生率を組み立てられない。
では何を報告すればよかったのか。離脱日がなくても、加入コホートごとの1年・3年・5年の固定時点残留率なら計算できる。離脱日が取れるなら、Kaplan–Meier法による生存解析が最も自然である※追記。
第二に、検定である。論文はχ²=24.4という値を報告している。何を計算したものなのかが方法の記述からは判然としないので、再現を試みた。
つまりこれは二つの標本を比べた2×2表ではなく、文献から取った丸めた数値を帰無仮説に置いた1標本適合度検定だった。「88.1%は50%と違うか」という問いに、有意差がつく。
ただし公開時の本文は、これを検定手法の不適切さの話として書いていた。批判の焦点はそこではない※訂正。1標本適合度検定であること自体は、外部文献値との対比として不当ではない。問題は、帰無仮説に置かれた50%が、対照としての比較可能性を持っていないことである。追跡期間もキャリア段階も残留の定義も異なる別の研究の値であって、反実仮想ではない。
第三に、層別である。大学自身のプレスリリースには、42名のうち17名が地域枠等の出身であるという表が載っていた14。この一列を論文に入れて層別するだけで、言えることは増えていた。
二点、注意を補っておく※追記。第一に、論文本文にある17/42は「県外の医学部出身者」という別の変数である。たまたま同じ17という値になっているだけで、混同してはいけない。第二に、私自身がこの層別解析をできるわけではない。公開資料からは地域枠等出身の17名のうち何名が残留したかが分からないからである。書けるのは——著者らが個票レベルで地域枠等の出身を把握しているのなら、残留を地域枠別に提示するだけで、選択効果についての情報がかなり増える、というところまでである。
報告基準の側も、同じことを求めている。StaRI は事前に規定した主要アウトカムと目標値、期待される作用機序に対応づけた過程評価、文脈の変化を求める15。SQUIRE 2.0 の項目9は端的に「Approach used to establish whether the observed outcomes were due to the intervention(s)」——観察された結果が介入によるものだと確かめるために何をしたか——を要求する16。
そしてMRCの複雑介入の枠組みは、こうした状況での目標設定そのものを組み替える17。
The framework challenges the view that unbiased estimates of effectiveness are the cardinal goal of evaluation. It asserts that improving theories and understanding how interventions contribute to change … is an equally important goal.
効果量が出せないなら、洗練されたプログラム理論こそが成果である、と。島根には語るべき理論がある。孤立が障壁であり、関係性がそれを解くという理論だ。それを反証可能な形に書き、次の県が試せるようにすることは、88.1%を報告するより難しく、そして価値が高い。
継続性は、40年かけて測れるようになった
ここまで書くと、悲観的に聞こえるかもしれない。総合診療が扱うものは測りにくく、だから研究が積み上がらない、と。
その悲観自体には長い歴史がある。Howie は1996年に、生物医学が細胞と系の理論を持つのに対し、総合診療の中核である診察について「The aggregate of these skills and attitudes represents the values element of my model. It is the intellectually important part, and the part that is particularly resistant to quantification」と書いた18。知的に最も重要な部分が、最も定量化に抗う。
だが、その悲観を裏切った例がある。継続性である。
継続性は、まさに「測りにくい」概念の代表だった。Salisbury らは2009年になってもこう書いている19。
Researchers attempting to operationalise and measure continuity face a minefield of conceptual and practical problems.
実際、指標は乱立した。系統的レビューは44論文から32種類の継続性指標を同定している。それでも、この分野は諦めなかった。1977年に Bice と Boxerman が最初の定量指標を提案し、概念を「縦断的継続性」「関係性」「連携」に分割し、指標の性質を比べ、大規模データで検証を重ねた。
そして2018年、Pereira Gray らの系統的レビューが出る20。
18 (81.8%) high-quality studies reported statistically significant reductions in mortality, with increased continuity of care. 16 of these were with all-cause mortality.
継続性が高いほど、死亡率が低い。文化圏を越えて。1977年から数えて41年である。
ただし公開時の本文は、これを「41年かけて測れるようになった」と書いた。科学史としては作りすぎである※訂正。2018年のレビューは測定問題が解決した年ではない。同じレビュー自身が「We found such heterogeneity of continuity and mortality measurement methods and time frames that it was not possible to combine the results of studies」——測定方法と時間枠の異質性が大きく、研究結果を統合できなかった——と述べており、22件はすべて観察研究である20。
正確にはこうである。40年以上をかけて複数の操作的定義が開発され、大規模なアウトカム研究まで到達した。それでも測定法の標準化は未完成である。
それでもこの40年が示したことはある。「総合診療の対象は測れない」という命題ではなく、「測定困難」と「測定不能」は違うということだ。時間と人手をかければ、少なくともここまでは来られる。
救急は、定義がなければ作った
もう一つ、対比を置きたい。救急である。
小児救急研究ネットワーク PECARN の設立趣旨は、克服すべき障壁を四つ名指ししている21。
Among these recognized barriers are low incidence rates of serious pediatric emergency events, the need for large numbers of children from varied backgrounds to achieve broadly representative study samples, lack of an infrastructure to test the efficacy of pediatric emergency care, and the need for a mechanism to translate study results into clinical practice.
事象が少ない。代表性のある標本には多施設化が要る。検証の基盤がない。実践へ翻訳する仕組みがない。
公開時の本文は、これを「総合診療が抱えている問題と、ほぼ同じである」と書いた。重なる範囲を限定しておく※訂正。重大イベントの発生率の低さは、総合診療には一般には当てはまらない。総合診療が扱うのは、むしろ頻度の高い疾患、多疾患併存、継続性である。重なるのは残りの三つ——多施設化の必要、共通データと検証基盤の不在、実践への翻訳の仕組みの不在である。そしてこの三つの重なり方が、驚くほど正確である。
違うのは、救急がそれを2001年に文書化し、連邦資金で基盤を作ったことだ。
そして、私が最も好きな一文が、院外心停止の登録事業の設計文書にある22。
Where possible all definitions are referenced to existing literature. Where a common definition did not exist one was developed.
共通の定義が存在しない場合には、定義を作った。測れないから測らない、ではなく。
私にとっての意味
前の記事で書いた「検証として設計できる人が足りない」は、不正確だった。訂正したい。そしてこの記事が公開時に置いた「足りないのは設計の知識ではない」という言い方も、同じくらい不正確だった※訂正。
書き直すと、こうなる。研究法そのものは存在する。しかし「研究法を知っている」ことと、「その方法を信頼できる形で実装できる研究基盤がある」ことは、別である。日本では正式な研究トレーニングを受けたGPが少なく、研究に割ける時間、資金、多施設ネットワーク、標準化された縦断データが不足してきた。島根の例が示したのはその両方である——差分の差分というモデルは書ける。だが介入前3年・8件というデータ構造が、そのモデルの識別を成り立たせない。
つまり問題は「デザインの不在」ではなく、「デザインが要求する情報量を供給できる研究システムの不足」である。年220万円の助成枠と定員1名の実践コースでは、40年はもっと長くなる。
同時に、これは自分にとって悪い知らせではないと思っている。
継続性の40年が示すのは、この分野の測りにくさが時間と人数で解ける種類の問題だということだ。そして今、PR3 Network という全国基盤がようやく立ち上がった。60施設、150名。ここから先に必要なのは、天才ではなく、同じ問いを続ける人の数である。
Cook らの言葉を借りれば、この分野に足りないのは rigorous な設計ではなく、line of inquiry——時間をかけて一本につながる問いの線だ。線は、一人では引けない。
私が入ろうとしているのは、その線がまだ短い分野である。短いということは、自分が引いた分がそのまま伸びるということでもある。