📖

メトリクスの設計

メトリクスの種類

映画レコメンドシステムの成功を測るためのメトリクスには2種類あります。
  1. オンラインメトリクス
    1. オンラインメトリクスは、A/Bテスト中にライブデータを使用したオンライン評価を通じてシステムのパフォーマンスを確認するために使用されます。主にダッシュボードで可視化します。
  1. オフラインメトリクス
    1. オフラインメトリクスは、本番環境でのモデルのパフォーマンスをシミュレートするオフライン評価で使用されます。
通常複数のモデルを学習し、ホールドアウトテストデータ(推薦メディアとのユーザーの過去の行動履歴)を用いてオフラインで調整およびテストすることができます。もしそのパフォーマンスの向上がプロダクション環境に導入するためのエンジニアリング労力に見合うものであれば、最もパフォーマンスの良いモデルが選ばれ、ライブデータでのオンラインA/Bテストに使用されます。
notion image

オンラインメトリクス(Online Metrics)

すべてを見るには

返金は購入日から1日以内に申し出て下さい。詳細はこちらからご確認ください。
また、このコンテンツ以外の他の永久アクセス権は付与されない事はご注意下さい。

支払いはによって保護されています

購入済の方はこちらからログインしてください

Loading...