Amazon SageMaker でのモデルメトリクス監視をすこし良くする方法 - Qiita

Amazon SageMaker でのモデルメトリクス監視をすこし良くする方法 - Qiita

この記事は ミクシィグループ Advent Calendar 2019 、9日目の記事です 概要 （３行まとめ） 機械学習の...概要を表示 この記事は ミクシィグループ Advent Calendar 2019 、9日目の記事です 概要 （３行まとめ） 機械学習のトレーニングジョブの精度モニタリング、モデル比較をいい感じにやりたい Amazon SageMaker では CloudWatch メトリクスのチャートが提供されるが、見づらい・・ SageMaker SDK または 独自コードでメトリクス収集して、メトリクスデータやグラフをモデルと同じ場所（S3）に置くとよかった 課題 Amazon SageMaker では、トレーニングジョブのメトリクス監視用に CloudWatch メトリクスをベースとしたチャートが提供 され、マネジメントコンソールのジョブ詳細にも表示されるようになっています 設定がお手軽ですが個人的には、ログの滑らかさ（出力頻度）や縮尺、単位表記など、アルゴリズムメトリクス監視用としては厳しい印象です 横軸は