【PAM05】モビリティ・マネジメント 効果検証・測定手法の課題

 

【PAM01】〜【PAM04】では、MMの理論的基盤、手法別の設計原理、国内外の事例を検証してきた。本レポート【PAM05】は、これらの検証を通じて繰り返し留保として付されてきた「効果測定の方法論的な課題」そのものを、シリーズの中で最も批判的な検証パートとして正面から扱う。

※この文書は AI Claude、スライド資料、音声解説 は Gemini により生成されており誤りを含む恐れがあります。

効果測定の方法論:意識調査ベースと実測ベース

意識調査(アンケート)の限界

MMの効果測定において最も広く用いられてきたのは、TFP等の介入前後で対象者にアンケートを実施し、行動意図・実行意図・自己申告による行動変化を尋ねる、意識調査ベースの手法である。しかし、この手法には構造的な限界がある。第一に、回答は対象者の「自己申告」であり、実際の行動と一致するとは限らない。第二に、【PAM02】で確認した通り、アンケートという手続き自体が、対象者に交通行動を振り返らせる心理的な介入として機能しうるため(規範活性化理論の喚起)、アンケートへの回答行為そのものが、測定しようとしている効果の一部を作り出してしまうという、測定と介入が分離できない問題を抱える。

実測データによる検証:熊本電鉄の事例

この限界を克服するため、意識調査に加えて、実際の交通行動データ(乗降者数、収入)を組み合わせて効果を検証する研究が蓄積されてきた。溝上章志・橋本淳也による熊本電鉄を対象とした一連の研究は、その代表例である。2008年の研究「熊本電鉄の利用促進のための継続的MMと商店街との共同による交通社会実験の効果」に続き、2010年の研究「利用実態調査による利用促進を目的としたMM施策の有効性評価」では、熊本電気鉄道沿線地域において延べ16,800世帯を対象とした標準TFPを実施し、事後アンケートで得られたデータの統計的分析に加えて、実際に熊本電鉄への利用に転換したTFP参加者を、駅間利用実態調査によって直接捕捉することで、TFPの効果を「観測」によって実証している[1][2]。この研究は、効果的なTFPを実施するためのマーケットセグメントの分離にもつなげており、アンケートによる自己申告と、独立した観測データの両方を組み合わせることの重要性を示す先駆的な事例として位置づけられる。

交絡要因の統制:弘南鉄道大鰐線TFPに見る厳密な効果測定設計

大鰐線の背景

青森県弘前市を走る弘南鉄道大鰐線は、2013年に廃止方針が示され、その後「事実上撤回」されたものの存廃問題が継続する地方鉄道である[3]。弘前市は2013年に弘南鉄道大鰐線存続戦略協議会を発足させ、運賃引き下げ・二次交通対策・MM等の複合的な利用促進策を展開してきた[3]。大野悠貴・伊地知恭右・原文宏による2019年の研究は、この大鰐線において2015年度・2016年度の2か年にわたり実施された沿線住民対象のワンショットTFPの効果を、方法論的に厳密な形で検証している[3]。

対照群比較という設計

この研究がとりわけ本レポートにとって重要なのは、単純な「実施前後の比較」にとどまらない、2種類の比較を組み合わせた擬似実験的な設計を採用している点である。第一の比較は、TFPを実施した対象駅と、TFPを実施しなかった対象外の駅との間で、定期外利用者数の変化率を比較するというものである[3]。第二の比較は、TFPを実施した年度(2015年度・2016年度)と、TFPを実施しなかった過去の年度(2012年度〜2014年度)との間で、同じ時期(11月〜3月等)の利用者数の推移パターンを比較するというものである[3]。この2つの比較を組み合わせることで、「対象駅で利用者が増えたのは、TFPの効果なのか、それとも季節変動や社会情勢等、TFPとは無関係な要因によるものなのか」という、単純な前後比較では区別できない問いに答えようとしている。

この設計の結果、TFP対象外の11駅(2015年度)・12駅(2016年度)では、MM実施の有無によって利用者数の推移パターンがほとんど変化しなかったのに対し、TFP対象駅では、MM実施年において、対象時期の変化率が明確に高くなることが確認された[3]。この結果から、研究者は「TFPを実施した年度が『何か社会的動向等の異常があった年』である可能性は少なく、TFP対象駅における利用者増加はTFPの効果である可能性が高い」と結論づけている[3]。

交絡要因の発見と補正:遠足利用の切り分け

この研究がさらに示す重要な方法論的な誠実さは、効果を過大評価しないための交絡要因の発見と補正である。石川駅では、TFP実施後の10月に定期外利用者数が47%という大きな増加を示したが、研究者らは、弘南鉄道の報告に基づき、この時期に沿線の保育園・幼稚園の児童148名が遠足で石川駅を利用しており、この利用者数(往復利用で296名)が、石川駅の10月の定期外利用者数1,337名のうち22.1%を占めることを突き止めた[3]。この遠足利用という交絡要因を除外すると、石川駅における「真の」TFP効果としての定期外利用者数の増加率は、当初の47%ではなく、実質的にはより低い水準(学院大前駅と同程度の8%前後)であったと推定し直している[3]。

この事例は、【PA03】で確認したポートランドのストリートカーやウィーンの365ユーロ年間パスの事例と並び、「行政・研究者が発表する成功指標を額面通りに受け取ってはならない」という本シリーズ全体の一貫した教訓を、日本国内の鉄道MM事例において、研究者自身が自己批判的に検証した稀有な事例として位置づけられる。多くのMM研究・実務報告が、こうした交絡要因の検証を明示的に行わない中、大鰐線の事例は、効果を主張する側が自ら反証可能性を追求した点で、方法論的に高く評価されるべきものである。

選択バイアス問題

【PAM02】で述べた通り、地域限定型MMのコミュニケーション形態(全戸訪問型・郵送配布型・対人接触型)の選択は、それ自体が測定される効果に選択バイアスをもたらしうる。大鰐線の事例における世帯回収率は、2015年度(千年地区)で28.7%、2016年度(学院大前・石川地区)で19.4%であった[3]。この回収率の水準は、アンケートに応じた世帯が、そもそも大鰐線・公共交通に対する関心が相対的に高い層に偏っている可能性を示唆する。実際、この研究では対象駅の選定理由として、過年度調査で公共交通に対する関心が高いと考えられる要素(高い回答率の実績等)が明示的に考慮されており[3]、これは対象選定の透明性という点では評価できる一方、選定された対象地域自体が母集団を代表しない可能性があることを、研究自体が示唆している。

効果の持続性・リバウンド問題

大鰐線の事例:2〜3か月後の効果減衰

大鰐線における2015年度・2016年度のTFPの効果は、いずれの対象駅においても、実施直後(1〜2か月後)には利用者数の増加が確認されたが、3か月後の中期的な時点では、その増加傾向が緩和・縮小する傾向が明確に示された[3]。具体的には、千年駅ではTFP実施直後の1月末までは大きく増加したが、3月時点(実施から約3か月後)には増加率が縮小し、学院大前駅では3か月間安定的な増加が見られたものの、これも中期的には緩和し、石川駅にいたっては3か月後には対象外駅の水準を下回る結果となった[3]。研究者は「TFPによる効果の発現は2か月程度にとどまり、3か月以上の中長期的な効果は期待し難い」と結論づけている[3]。

先行研究が示す一貫したパターン

この効果減衰のパターンは、大鰐線に固有の現象ではなく、複数の先行研究によって一貫して確認されてきたことが、同研究のレビューによって示されている。染谷祐輔・藤井聡(2006)による「事前調査に基づく被験者分類を伴うTFPの『長期的』効果に関する研究」、松村暢彦(2008)による「既存住民と転入者を対象としたワンショットTFPによる態度・交通行動変容効果の持続性評価」、横溝恭一・森本章倫(2010)による「MM実施による路線バス利用の経年変化に関する研究」は、いずれもMM実施直後の短期的な効果の発現は確認できる一方、実施後3か月から1年以上といった中長期的な効果については、実施直後よりも縮小する傾向にあることを示している[3]。

とりわけ松村暢彦(2008)の研究は、既存住民と転入者という2つの対象者群を比較することで、持続性の違いを検証している点で重要である[3][4]。【PAM02】で述べた「転居による習慣の一時的解体」という理論的メカニズムに照らせば、転入者の方が既存住民よりも、TFPによる行動変容がより長く持続する可能性が理論的には予想されるが、この予想が実証的にどこまで支持されるかは、【PAM03】で扱った転入者対象MMの評価においても、改めて検証を要する論点である。

鈴木ら(2006)によるメタ分析:全国的な効果の範囲

個別事例を超えた、より全国的・体系的な効果の範囲を示す研究として、鈴木春菜・谷口綾子・藤井聡(2006)による「国内TFP事例の態度・行動変容効果についてのメタ分析」が参照される[3]。同メタ分析によれば、特に居住者を対象としたTFPの実務的効果として、TFP実施前後で参加者(回答者)の自動車利用削減意図が約15%減少し、公共交通利用意図が約9%増加することが示されている[3]。さらに、実際の行動変化としては、自動車利用が約15%削減され、公共交通利用が約31%増加すると報告されている[3]。このメタ分析の数値は、個別事例(例えば大鰐線や熊本電鉄)の効果を、全国的な水準と比較する際のベンチマークとして機能する。

費用対効果への反証事例

予算リスクと継続性の中断:大鰐線の2017年度終了

大鰐線の事例は、効果測定の方法論だけでなく、【PAM03】で扱った継続性・制度化の課題についても、重要な反証を提供する。弘前市(協議会)は2017年度にも大鰐線沿線住民を対象としたTFPを実施したが、同年度は弘前市の予算縮小に伴い、2015〜2016年度と比較して実施規模が縮小し、MMの効果は発現しなかった[3]。結果的に、弘前市による大鰐線におけるMMは、2017年度を最後に終了した[3]。研究者はこれを「行政だけがMMの実施主体となっている場合は『金の切れ目が縁の切れ目』という予算リスクが、MMの継続的な実施の弊害となる」と総括している[3]。この結論は、【PAM03】で確認した川西市(制度化による継続)・福井市ROBA(市民ネットワークによる継続)という「継続に成功した事例」との対比において、「継続に失敗した事例」を示す重要な反証である。

近江鉄道のイベント収支分析:表面上の黒字と人件費を含めた実質収支の乖離

近江鉄道(滋賀県)に関する調査として、(一財)地域公共交通総合研究所が滋賀県からの委託を受けて実施した「地域公共交通ネットワークのあり方検討調査報告書」(2019年3月)は、2016年度に実施された主なイベント施策の実施回数・輸送人数・収支を、分類別に一覧化している[5]。近江鉄道線では、電車運転体験、ハイキング、がちゃこんまつり、ビア電やワイン電車、地酒電車、鉄道バル等のイベントが年間80日以上開催されている[5]。

同報告書の表6(主なイベント、2016年度実施分)によれば、分類別の収支小計は、イベント列車(乗車型)が+68千円、イベント開催(体験型:ハイキング、がちゃこんまつり、電車運転体験、鉄道ミュージアム)が-1,927千円、グッズ販売が+1,943千円、記念乗車券が+376千円となっている[5]。

ここで重要な留保が必要である。これらの「収支」には、イベントの企画・運営に要した人件費が計上されていない。すなわち、表面上「黒字」として示されているイベント列車・グッズ販売・記念乗車券の各カテゴリも、実際にはイベントの立案、当日の運営、グッズの企画・在庫管理等に投じられた職員の労働時間というコストを反映していない数字である。この人件費を適切に計上すれば、表面上の黒字の多くは相殺され、あるいは赤字に転じる可能性が高い。この点を踏まえると、

この事例が示す方法論的な教訓は、当初本レポートが示した「カテゴリ別の精査によって明暗が分かれる」という整理よりも、さらに一段深いところにある。すなわち、(1)集計された数値の内訳を精査することは必要だが、(2)その内訳の収支計算そのものが、どのコスト項目を含み、どのコスト項目を含まないかという「収支の定義」を確認しない限り、精査したつもりでも実態を見誤りうる、という二段階の注意が必要だということである。イベント列車・グッズ販売・記念乗車券が示す表面上の黒字は、変動費(材料費、記念品原価等)を運賃・物販収入が上回っているという意味では黒字だが、これに人件費という固定費的性格の強いコストを加えた「完全原価」で見れば、収支の姿は大きく変わりうる。この「表面収支」と「完全原価による収支」の区別は、【PAM02】で扱った収支シミュレーションの設計においても、明示的に組み込まれるべき論点である。

各レポートへの接続

本レポートで検証した効果測定の方法論的課題(意識調査と実測データの組み合わせ、対照群比較、交絡要因の統制、選択バイアス、持続性)は、【PAM06】(制度的・実施体制上の課題と限界)における「なぜMMの継続が困難なのか」という問いに、実証的な裏付けを与えるものである。とりわけ、大鰐線の事例が示した「予算リスクによる中断」という現象は、【PAM06】で本格的に扱う実施主体の多様化・推進体制のあり方の検討にそのまま接続する。

参考資料一覧

1. 溝上章志・橋本淳也(2008)「熊本電鉄の利用促進のための継続的MMと商店街との共同による交通社会実験の効果」土木計画学研究・論文集, Vol.25, No.3, 731-739.
2. 溝上章志・橋本淳也・末成浩嗣(2010)「利用実態調査による利用促進を目的としたMM施策の有効性評価」土木学会論文集D, Vol.66, No.2, 147-159. https://www.jstage.jst.go.jp/browse/jscejd/66/2/_contents/-char/ja
3. 大野悠貴・伊地知恭右・原文宏(2019)「鉄道利用促進に向けたモビリティ・マネジメントの効果と推進体制の検討」実践政策学, 第5巻2号, 147-158. https://policy-practice.com/db/5_147.pdf
4. 松村暢彦(2008)「既存住民と転入者を対象としたワンショットTFPによる態度・交通行動変容効果の持続性評価」土木学会論文集D, Vol.64, No.1, 77-85.
5. 一般財団法人地域公共交通総合研究所(2019)「地域公共交通ネットワークのあり方検討調査報告書」(滋賀県委託調査事業、2019年3月) https://www.pref.shiga.lg.jp/file/attachment/5142458.pdf

大野ら(2019)の論文は、以下の関連文献をレビューの中で参照している:染谷祐輔・藤井聡(2006)「事前調査に基づく被験者分類を伴うTFPの『長期的』効果に関する研究」土木計画学研究・論文集No.23-2, 533-541;横溝恭一・森本章倫(2010)「MM実施による路線バス利用の経年変化に関する研究」都市計画論文集Vol.45, No.3, 457-462;鈴木春菜・谷口綾子・藤井聡(2006)「国内TFP事例の態度・行動変容効果についてのメタ分析」土木学会論文集Vol.62, No.4, 574-585;沼尻了俊・神田佑亮・藤井聡(2014)「モビリティ・マネジメントの継続要因に関する地域横断的考察」土木学会論文集F5, Vol.70, No.2, 26-45。個別の一次確認は今後の課題とする。

年表

• 2006年:染谷祐輔・藤井聡、鈴木春菜・谷口綾子・藤井聡がTFPの長期的効果・メタ分析に関する研究をそれぞれ発表[3]
• 2008年:溝上章志・橋本淳也が熊本電鉄における継続的MMの効果に関する研究を発表[1]
• 2008年:松村暢彦が既存住民・転入者別のワンショットTFP持続性評価を発表[4]
• 2010年:溝上章志・橋本淳也・末成浩嗣が熊本電鉄の駅間利用実態調査によるMM有効性評価を発表[2]
• 2010年:横溝恭一・森本章倫が路線バス利用の経年変化に関する研究を発表[3]
• 2013年6月:弘南鉄道が大鰐線の2017年3月末廃止方針を表明、その後事実上撤回[3]
• 2013年8月:弘前市が弘南鉄道大鰐線存続戦略協議会を発足[3]
• 2014年:沼尻了俊・神田佑亮・藤井聡がMMの継続要因に関する地域横断的考察を発表[3]
• 2015〜2016年度:弘前市が大鰐線沿線住民を対象としたワンショットTFPを2か年にわたり実施[3]
• 2017年度:弘前市の予算縮小により大鰐線TFPの実施規模が縮小、効果発現せず、MMは同年度で終了[3]
• 2019年3月:(一財)地域公共交通総合研究所が滋賀県委託により「地域公共交通ネットワークのあり方検討調査報告書」を発表、近江鉄道のイベント別収支を分類別に整理[5]
• 2019年:大野悠貴・伊地知恭右・原文宏が大鰐線MMの効果と推進体制に関する研究を『実践政策学』に発表[3]

用語集

• 対照群比較: TFP等の効果測定において、施策を実施した対象と実施しなかった対象(対照群)を比較する手法。単純な前後比較だけでは検出できない外部要因の影響を排除するために用いられる。
• 擬似実験デザイン: ランダム化比較試験のような厳密な実験ではないが、対照群・実施年度比較等を組み合わせることで、因果関係の推定に近づけようとする調査設計。大鰐線の研究が採用。
• 交絡要因: measured効果に影響を与えるが、施策そのものとは独立した第三の要因。大鰐線の事例では、保育園児の遠足利用が交絡要因として特定された。
• 選択バイアス: アンケート等への協力に応じる対象者が、母集団全体を代表せず、特定の属性(公共交通への関心が高い層等)に偏ってしまう現象。
• 効果の持続性・リバウンド問題: MM実施直後には確認される行動変容効果が、時間の経過とともに縮小し、元の行動パターンに戻っていく現象。多くの先行研究で3か月程度を境に確認されている。
• メタ分析: 複数の個別研究の結果を統合し、より一般的な効果の範囲・傾向を導き出す統計的手法。鈴木ら(2006)が国内TFP事例に適用。
• 駅間利用実態調査: アンケートによる自己申告ではなく、実際の乗降データを直接観測することで、TFP等の効果を検証する調査手法。熊本電鉄の研究で用いられた。
• イベント収支の分類別精査: 近江鉄道の事例が示す教訓。カテゴリ別の「収支」を精査しても、その収支計算が人件費等の完全原価を含んでいるかを確認しない限り、実態を見誤りうること。表面収支と完全原価による収支は区別して評価する必要がある。

ログ

大鰐線(弘南鉄道)の研究論文から、極めて厳密な効果測定設計(対照群比較・擬似実験デザイン・交絡要因の統制)を発見しました。これを中核に【PAM05】を執筆します。Let’s verify citation integrity and check length:【PAM05】(効果検証・測定手法の課題)を作成しました。約7,500字、参考資料4件、全11章。

中核事例:弘南鉄道大鰐線(青森県弘前市) — 大野悠貴ら(2019)『実践政策学』掲載論文から、シリーズ中でも群を抜いて方法論的に厳密な事例を発見しました。

この事例が示す4つの重要な論点:

1. 擬似実験デザイン:「TFP対象駅 vs 対象外駅」と「MM実施年 vs 未実施年(2012〜2014年)の同時期比較」という2種類の比較を組み合わせることで、単純な前後比較では検出できない季節変動等の影響を排除
2. 交絡要因の自己批判的な発見:石川駅の定期外利用者+47%という数字が、実は保育園児148名の遠足利用(22.1%相当)を含んでいたことを研究者自身が突き止め、「真の効果」を再計算——PA03のポートランド/ウィーンと並ぶ、成功指標を鵜呑みにしない姿勢の好例
3. 持続性の実証:効果はどの駅でも2〜3か月で減衰。これは染谷・藤井(2006)、松村(2008)、横溝・森本(2010)という複数の先行研究と一致する頑健なパターン
4. 予算リスクによる中断の実証:2017年度、弘前市の予算縮小により実施規模が縮小し効果が発現せず、そのままMMは終了——「金の切れ目が縁の切れ目」という、PAM03の川西市・福井市ROBAとは対照的な「失敗事例」

近江鉄道の扱いについて:研修設計書で参照されていたイベント収支の分析は、一次資料を確認できていないことを明記した上で「留保付きの情報」として扱いました。この慎重さ自体が、本レポートのテーマ(効果測定における一次資料確認の重要性)を体現する形になっています。

このあたりで確定し、最終巻【PAM06】(制度的・実施体制上の課題と限界)に進みますか。

一次資料を確認できました。想定していた「近江鉄道のイベントは軒並み赤字」という単純な図式ではなく、カテゴリによって明暗が分かれる、より precise な実態でした。表6の数値を正確に反映してPAM05を全面的に書き直します。Now let’s update the reference citation for the correct report details:Now let’s update the timeline and check overall integrity/length:Now let’s add a glossary entry and check final integrity:All citations valid. Let’s present the corrected file:一次資料(表6)を精査した結果、想定していたよりもずっと興味深い、そして重要な訂正が必要でした。

訂正の要点

一次資料が示す実態:イベントの分類によって明確に明暗が分かれる

分類	収支
イベント列車(ビア電・貸切列車等)	+68千円(黒字)
イベント開催(ハイキング・体験型)	-1,927千円(明確な赤字)
グッズ販売	+1,943千円(黒字)
記念乗車券	+376千円(黒字)

赤字なのは主に「イベント開催」(体験型・非乗車系:ハイキング、がちゃこんまつり、電車運転体験、鉄道ミュージアム)であり、乗車を伴う「イベント列車」自体は個別に赤字企画を含みながらも全体では黒字でした。報告書自身も地酒電車について「収支の改善も図れる」と前向きに言及しており、イベント施策全体を否定する論調ではありません。

PAM05への反映

この発見はPAM05の主題(効果測定における一次資料確認の重要性)そのものを体現する事例だったため、大鰐線の交絡要因統制(遠足利用の切り分け)と並ぶ好例として位置づけ直しました。「集計された数字を鵜呑みにせず、内訳まで遡って確認する」ことの重要性を、シリーズ自身の記述の訂正という形で実証したことになります。

ご指摘ありがとうございます。それは重要な訂正です。表6の「収支」に人件費が含まれていないとなると、話の結論が変わってきます。反映します。Now let’s update the summary table and glossary entry to reflect this corrected understanding:All valid, structure intact. Let’s present the corrected file:反映しました。前回の私の「精査」は不十分で、表6の収支に人件費が含まれていないという最も重要な留保を見落としていました。ご指摘のとおりです。

修正後の結論

• 表面上の「黒字」(イベント列車+68千円、グッズ販売+1,943千円、記念乗車券+376千円)は、いずれも変動費(材料費・記念品原価等)ベースの収支にすぎない
• 企画・運営に投じられた職員の人件費が計上されていないため、完全原価で見れば黒字の多くは相殺・反転する可能性が高い

教訓として整理した点

これは単なる「訂正」以上の教訓になったと思います。効果測定の精査には二段階あることが分かりました。

1. 集計値の内訳(カテゴリ別)を確認する
2. その内訳の収支計算自体が何を含み、何を含まないか(収支の定義)を確認する

このままPAM05を確定し、【PAM06】(制度的・実施体制上の課題と限界、シリーズ最終巻)に進みますか。