コラムバックナンバー
Option合同会社 柳井 隆道
発信元:メールマガジン2021年3月17日号より
先日天下のNatureという雑誌に以下のレポートが発表されました。
Stay-at-home policy is a case of exception fallacy: an internet-based ecological study
自粛(Stay-at-home)と新型コロナウイルスの感染抑制には関係がないというものです。結論の内容はともかく、この論文で使われている考え方がわれわれの日々の分析においても有用なのでそれを紹介します。
自宅で過ごすことによって死亡者数/百万人が減少するという証拠は見つかりませんでした。
調査は一部Googleのコミュニティモビリティレポートのデータも使って行われています。
https://www.google.com/covid19/mobility/
■例外的誤謬
「exception fallacy」と言っています。例外的誤謬と訳すことがありますが、これは一部の事例に基づいて、物事を判断する。その事例が母集団全体を反映していない例外的な事例であって、その結果間違った認識をすることを言います。
目立つ事象だけに基づいて、観測されない事象が多くあることを無視して一般化してしまうことがまさにそうですね。世の中でありがちな、声の大きい主張だけに耳を傾けてそれがすべてだと信じてしまうのと同じです。これが「自粛→感染抑制」の関係において発生しているというわけです。
■施策の有効性を測るための比較
自粛施策を行った地域(国や都市)と行っていない地域との間で比較します。自粛以外の変数(いわゆる共変量)が類似の傾向を持つ地域で自粛政策を行った地域とそうでない地域を1個ずつ抽出してペアを作ります。そのペアが33組あり、33組の比較を行い、その比較が全体的にどのような傾向だったかを見ています。
これは決して「自粛」という政策のみでなく一般的な施策介入においても有効なフレームワーク(介入効果を測る因果推論)なので、知っておくといいです。
■正しい時系列分析の手法を用いる
調査では時系列分析を行っています。単純に期間全体での自粛の度合いと死亡数を見ているのではなく、時系列(トレンドや周期性)を考慮した比較をしています。そして時系列には正しい時系列的取り扱いをする必要があり、それをしないと本来ありえない関係を因果関係としてとして導くことになってしまいます(見せかけの回帰)。
日々の仕事の中で施策を評価する、比較を行う際も、時系列は考慮すべきケースが多いです。われわれが分析に使うデータには実際にはトレンドや周期性(季節、曜日の影響)があります。たとえば売上に対する施策(介入)の影響を評価する際には、売上に対するトレンドや曜日の影響を除外する必要があります。そのためにさまざまなテクニックがあります。
この調査でもそういったものが使われています。日次の死亡率のデータから週単位に集計して、さらに死亡率そのものを見るのではなく今週の死亡率と前週の死亡率の差分をとっています。自粛の度合いについても今週の自粛度と先週の自粛度の差分をとっています。こういったテクニックが正しい時系列分析の手法であり、それをしないと誤った結論を導くことになるわけです。
時系列の扱いは技術的に高度になるのでデータを工夫してなるべく避けたいところではあるのですが、これに対して同時期に行うスプリットテストでは時系列を考慮する必要はありません。簡単に施策を評価できるのがABテストです。そういう意味でもABテスト(randomized controlled testという類の手法)はおすすめの手法です。
正しくデータを見る。正しい手法でデータを見る。
それはみなさんの日々の仕事においても、新型コロナウイルスに対しても、同じことです。日々の仕事では正しくデータを扱えてもウイルスに対してはそれができないなどということはあり得ません。それができないのはデータに対する姿勢と手法が間違っているということになります。データ分析においては扱う題材が何であれ、手法は共通しています。日々の業務で接するデータだけでなく、いろいろな題材から分析手法を学ぶことはおすすめです。
東京大学を卒業後、webマーケティングやサービス企画、システム開発などに従事。
デジタルマーケティングの世界に落ち着き、事業会社、広告代理店を経て2014年に独立。
現在は大小さまざまの事業会社、広告代理店などに対して、テクノロジー観点からデジタルマーケティングの支援を行っている。データ計測の設計、実装から分析、マーケティングオートメーションや広告運用などの施策との連携まで扱う。
さまざまな規模の経験から、企業の身の丈にあったデジタルマーケティングの企画に強い。フリーランスで活動していたが、2017年から法人化。
2021/04/21(水)
オンラインセミナー「新しいGoogle アナリティクス 4への移行の現場から ~ ユニバーサル アナリティクスからGA4へ」|2021/4/21(水)
今年はGoogle アナリティクス 4(GA4)の情報収集段階から、検討・導入段階に進む企業が増えてくる1年になると考えられます。 そこで今 …
2021/03/11(木)
オンラインセミナー「地方かつ1人で頑張るweb担当者さんの成功事例」|2021/3/11(木)
■□ お知らせ □■ 一般参加が可能になりました 当セミナーは、当初有料会員限定を予定していましたが、一般の方が参加可能な無料セミナーとなり …
2021/02/18(木)
オンラインセミナー「はじめてのGoogleデータポータル&Google BigQuery」|2021/2/18(木)
2016年に米国でベータ版が公開されたGoogleデータポータル。 製品のリリースノートが何回更新されているかを調べてみたところ、年々回数が …
データ分析のスキル、データリテラシー、そしてエンジニアリングのスキルを当然のように身に着けた若者が社会に解き放たれる時代がもうすぐそこまでや …
数字を追いながら何か状況の改善を進めているとき、ゲーム的な楽しみを感じ始めたら立ち止まった方が良いです。数字の向こう側にいるユーザーへの意識 …
【コラム】アプリ解析「計測しやすさ」を打ち出したノーコードサービスを
アナリティクスアソシエーション 大内 範行これまで a2iでは、ウェブ解析だけでなく、モバイルアプリ解析についても、FirebaseやAppsFlyerなど、年に一回のトピックとして …