模型应用
模型的监控
结果监控
主要是针对一些具体的指标进行监控,还可以根据具体产出的结果在业务中的效果进行监控
#针对每天新闻的分类标签进行排名统计,来查看每个标签的占比情况与初始数据是否接近
人工定期复审
主要针对业务需求准确率的情况进行评估
查看当前的模型效果是否还满足业务的需求,准确率情况是否有所变化,跟业务进行沟通评估,确认当前的情况是否需要对模型进行重新训练
Case收集与样本积累
知道当前模型存在哪些问题,收集到的足够Case可以作为重新训练的样本积累
结果监控
主要是针对一些具体的指标进行监控,还可以根据具体产出的结果在业务中的效果进行监控
#针对每天新闻的分类标签进行排名统计,来查看每个标签的占比情况与初始数据是否接近
人工定期复审
主要针对业务需求准确率的情况进行评估
查看当前的模型效果是否还满足业务的需求,准确率情况是否有所变化,跟业务进行沟通评估,确认当前的情况是否需要对模型进行重新训练
Case收集与样本积累
知道当前模型存在哪些问题,收集到的足够Case可以作为重新训练的样本积累