ベンチを置いた。通行が増えた。だから効果があった——効果検証の報告書によくある三段論法ですが、この推論はとても壊れやすいものです。施策の前後で変わったのは、施策だけではないからです。
「前後」の間に、何が変わったか
計測の前後比較を狂わせる代表的な要因を挙げます。
- 天候: 晴れの日と雨の日では、同じ場所の通行が大きく違う
- 曜日・季節: 平日と休日、観光期と閑散期は別の母集団
- 周辺の変化: 近隣の工事、店舗の開閉店、イベント
- 計測条件の変化: カメラの位置・画角・計測線が少しでも違えば、施策と無関係に数字は動く
「増えた」の中身がベンチの効果なのか、単に晴れた土曜日と比べたからなのか。分離する設計をせずに測ると、どちらとも言えない数字が納品されます。
比較設計の基本形
学術的な厳密さまでは要らなくても、実務で守る価値のある基本形が3つあります。
1. 条件を揃える。同曜日・同時間帯で比較し、天候を記録する。「before: 10月の平日3日間の夕方 / after: 翌年10月の平日3日間の夕方」のように、比較の枠を先に固定します。
2. 対照地点を併測する。施策をした場所と、施策と無関係な近くの場所を同時に測る。対照地点も同じだけ増えていたら、それは施策ではなく全体の変動です。この1手間が、効果検証の説得力を段違いにします。
3. 計測条件の同等性を記録する。カメラ位置・画角・計測線・指標の定義が前後で同じであることを、成果物として残す。前後で事業者が替わる場合は特に、ここが崩れやすい急所です。
効果検証の質は、afterを測るときではなく、beforeを測る前に決まります。「何と比べるか」を先に設計しないbefore計測は、afterが来たときに使えないことが多いのです。
「効果があったとは言えない」を言える契約に
もうひとつ大事なのは、結果の表現です。差が小さい、対照地点も動いた、条件が揃わなかった——そういうときに「効果は確認できなかった」と正直に書ける空気と契約になっているか。
効果検証を「効果があったことにする作業」として発注すると、事業者は都合の良い切り取りをする誘惑にさらされます。「効果の有無を判定する作業」として発注し、どちらの結論でも受け取る——これは発注者にしかできない品質管理です。
発注時のチェックリスト
- 比較の枠(曜日・時間帯・期間)が仕様で固定されているか
- 対照地点の併測が含まれているか
- 計測条件(位置・画角・線・定義)の同等性が成果物として記録されるか
- 「効果は確認できなかった」という結論が許容される契約・報告様式か
おわりに
前後比較は、都市データ活用の中でいちばん意思決定に直結し、いちばん雑に行われている領域です。設計の手間は小さく、やり直しの代償は大きい。beforeを測る前に、この記事の4項目だけ確認してみてください。