MLのためのA/Bテスト

Novelty Effect

A/Bテストにおけるバイアスで、ユーザーが本質的な品質とは関係なく、単に新しいからという理由だけで新機能に肯定的に反応する現象。これにより新しいモデルの評価が歪む可能性があります。

← 戻る