では、どのようにモデルの学習データを管理し、学習をさせていけばよいのでしょうか。機械学習や自動学習という言葉が使われていますが、多くの方が想像するのとは異なり、『常に』データを受け取ってモデルの学習をしてくれるわけではありません。学習データの内容を確認し、十分な精度になるようにモデルを修正するのは人間の役割です。そのため、運用の中でモデルの精度を検証しながら、適切なタイミングでモデルを修正していくための手順をしっかりと計画立てて実行する必要があります。
機械学習の実業務への活用事例が増えるにつれ、システムの開発や検証方法のみならずこうした運用方法についての重要性も認識され始めてきています。しかし、未だ最適な方法論があるわけではありません。そのため、今は個々の業務にあわせた運用設計が必要になります。