Repro - Mobile Analytics for growth
English
アカウント登録 管理画面に戻る
  • 動作環境
  • 管理画面ガイド
  • 開発ガイド
  • リリースノート
  • FAQ
    • App
    • Web
    • 共通
      • アナリティクス
      • A/Bテスト 有意差表示
        • 算出に利用している数値はどの時点で集計されたものですか?
        • 「まだ有意差がありません」の表示から変わらないのですが、いつ頃終わるかの目安はありますか?
        • どの程度の配信数から結果の表示ができますか?
        • 有意差とはなんですか?
        • 信頼区間とはなんですか?
        • 有意差ありとでたらそれ以降で判定結果は変わりませんか?
        • 過去の有意差は見られますか?
        • 信頼区間で用いている有意水準 (信頼水準) は変更できますか?
        • 勝ちパターンの自動選択はいつ実行されますか?
        • 配信中のキャンペーンでも勝ちパターンの自動選択を有効にできますか?
        • コントロールグループが勝ちパターンとして自動で選択されることはありますか?
      • API
      • その他

有意差ありとでたらそれ以降で判定結果は変わりませんか?¶

勝ちパターンを選択するまでは、変わることがあります。判定結果は表示のたびに、その時点までの配信結果すべてを使って計算し直されるためです。その後の配信結果によっては、「有意差あり」が「有意差なし」に戻ることもあります。ただし、Reproの有意差判定は、繰り返し確認しても誤った「有意差あり」が出にくい手法(逐次検定)を用いているため、一度表示された判定が後から覆ることは多くありません。

勝ちパターンを選択すると(手動・自動選択のいずれでも)、以降は有意差判定が行われないため、判定結果が変わることはありません。「有意差が確認された時点で勝ちパターンを自動で選択する」を有効にしている場合は、確定した時点の判定結果が固定して表示されるため、判定が後から変わる心配はありません。

  • « 信頼区間とはなんですか?
  • 過去の有意差は見られますか? »

Repro Service Site About Us Careers Terms of Service Privacy Policy Cookie Policy

© 2022 Repro Inc.