エピソードを探す

1 件が見つかりました

Super Data Science: ML & AI Podcast with Jon Krohn

羽根を量る体重計:機能するA/Bテストの設計法(Billur Engin氏)

1046: Weighing a Feather: How to Design A/B Tests That Work, with Billur Engin

Prolificでデータサイエンスとアナリティクスを率いるBillur Engin氏が、Jon Krohn氏と、学びを得られる実験の設計法を語った回。A/Bテストの最大の誤解は「どのテストからも何か学べる」という思い込みで、検出できる効果量を設計時に考えないと、体重計で羽根を量るようなテストになると述べる。ランダム化できない場合の因果推論の代替手法や、予測が安価になった今こそ因果推論が重要だという見方、指標定義の統一が意思決定の信頼を支えるという考えも紹介された。