脱炭素・再エネ行動変容ラボ / 自治体・メーカー・EPC向けRCT実践ガイド:ナッジ施策の効果検証

ENEGAERU / 脱炭素・再エネ行動変容ラボ

ランダム化・事前登録・統計的検出力・公平性まで一気通貫

再エネの施策評価では、自然に増えた需要や他社の販売活動を施策の成果と誤認しやすい。ランダム化比較試験では対象者を介入群と統制群に割付し、あらかじめ指定した主要アウトカムで効果を比較する。設備導入では販売店・自治体単位のクラスターRCTが必要になる場合がある。

読み方:「実証結果」「学術研究に基づく一般論」「エネがえる独自の実装提案」を区別して記載。提案施策の効果は導入後の実験で検証する。

重要な論点・エビデンスから分かること

評価設計の柱

実験単位、除外基準、主要アウトカム、最小検出効果、必要サンプル数、解析期間、ITTを事前登録する。

リスクを監視

費用・リスク説明不足、苦情、撤回率、低所得者等への公平性を主要KPIと併せて評価する。

効果がない結果にも価値

不確実な大規模施策を止め、別の障害の解消へ投資を移せるため、無効な施策の発見も価値が高い。

何が行動・意思決定を止めているのか

単純前後比較

補助金公募、金利、設備価格、季節変動で成約率が変わり、施策効果とは限らない。

複数指標のつまみ食い

主要KPIが非有意でもクリック率だけ有意だったことを導入成功と表現しない。

実装手順:顧客の仕事を終わらせるために

  1. 仮説を限定例:「初回提案の自動生成で完成時間が20%短縮する」を一次仮説とする。
  2. 割付とログ企業・営業員・案件種別の交差汚染を避けながら割付、割付後の欠測・途中離脱も記録する。
  3. 信頼区間で意思決定p<0.05だけでなく実用上意味ある改善幅を超えたかを報告し、必要に応じて再実証する。

どのKPIで実際の成果を評価するか

主要アウトカムのITT 95%信頼区間 検出力と最小検出効果 介入による不利益の発生率

試験開始前に固定する八つの項目

  1. 対象者と適格条件。誰に配る施策か、除外はなぜ必要か。
  2. 割付単位。個人・世帯・店舗・自治体のどれで分けるか。
  3. 比較条件。通常の案内と何が違うのか。
  4. 主要指標。期限までの完了率など、一つを先に選ぶ。
  5. 検出したい最小差。事業上意味のある改善幅を定める。
  6. 必要人数、募集期間、追跡期間、終了規則。
  7. 欠測、重複、途中解約、群間の情報共有への扱い。
  8. 苦情・誤認・公平性・費用の停止条件。

平均値を比べる前に、割付を守る

担当者が『反応しそうな顧客』を改善群へ入れると、施策の効果と元々の意欲の差が分離できません。割付は対象者を登録した後、担当者の判断が入りにくい方法で実行し、割付結果を記録します。結果を見てから群を入れ替えたり、回答しなかった人を片方だけ除外したりしないことが大切です。

同じ営業担当が両群へ同じ改善説明をしてしまう場合は、介入の混入が起きます。店舗単位の割付が適する可能性がありますが、必要人数の計算は個人割付と変わります。顧客数が多くても店舗数が少ない試験では、独立な情報が少ないままです。

20%から25%を見つけるには

独立した二群、等割付、両側5%、検出力80%の正規近似なら、20%と25%の差を検出する目安は1群約1,094人です。無料計算機では用いるz値を明示し、端数を切り上げています。営業担当10人が1週間試す程度では、同じ小さな差を高い確度で検出できるとは限りません。

人数を集められないときは、『少数でも有意になるはず』と期待するより、工程時間や入力エラーのように近い指標を測り、行動への影響を探索段階と位置付けます。ただし、測りやすい指標を最終成果の代わりに宣伝しないようにします。

ITT、欠測、追跡をどう報告するか

ITTは、割り付けた群に基づいて解析する考え方です。改善画面を最後まで見た人だけを解析すると、途中で離脱した人を除いてしまい、効果を過大評価することがあります。割付人数、実際に届いた人数、利用した人数、結果を取得できた人数を別々に残します。

欠測は自動的に成功・失敗のどちらかへ置換せず、指標の定義と欠測の理由に応じて事前に扱いを決めます。追跡できた人だけの結果に加え、欠測が不利に偏った場合でも結論が変わらないかを確かめます。契約率なら契約取消、設備導入なら稼働開始も別の日付で記録します。

有意差が出なかった後に残すもの

『失敗』の一言では次に生かせません。推定差、信頼区間、予定人数に到達したか、介入が実際に届いたか、実行可能な対象だったかを記載します。効果が小さいのか、推定の幅が広いのか、介入が届いていないのかでは次の対応が違います。実施後に見つけた顧客層の違いは仮説として残し、次の試験で検証します。

一次資料・学術文献

出典は2026年10月11日時点の確認情報。原著の評価対象・測定期間・適用条件を参照してください。

  1. OECD BASIC Toolkit:行動科学実装と倫理OECD・2019
  2. 環境省「ナッジ実証事業取りまとめ」詳細版(2026)環境省・2026年9月
  3. 世界63か国・59,440人の気候変動行動介入比較実験Science Advances・2024
自社・自治体の施策に適用するには

科学的知見をそのまま転用せず、実際の顧客プロセスと対象行動に合わせた検証計画から始めましょう。

エネがえる公開調査レポートを見る →

あわせて読みたい

最終確認:2026年10月11日。設備・料金・制度は最新情報を参照。

運営:国際航業株式会社 エネがえる。公開資料に基づく解説と本ラボの独自提案を掲載。調査・編集にはAIを補助的に使用しています。

資料確認日:2026年10月11日。内容へのお問い合わせ・訂正のご連絡は公式お問い合わせ窓口へ。

たった15秒でシミュレーション完了!誰でもすぐに太陽光・蓄電池の提案が可能!
たった15秒でシミュレーション完了!
誰でもすぐに太陽光・蓄電池の提案が可能!