1 自训练平台

2024.04.24 14:59:17

    1.1 模型管理

    模型管理页面,用于创建、维护模型基本信息,查看模型及版本训练状态。

    1.1.1 创建模型

    点击【创建模型】按钮,打开弹窗;

    填写模型名称、模型标识、模型版本,完成模型创建。

    模型名称:模型名称,用于系统示意。

    模型标识:命中后,接口返回的命中内容。

    模型版本:前创建的模型版本。每个模型可创建3个版本。

    img

    1.1.2 模型训练

    点击【训练】按钮,打开【模型训练】弹窗。确认版本后开始训练。 img

    1.1.3 效果验证

    模型训练完成后,该版本模型的能力已生成,此时命中阈值为该模型命中/未命中的分数临界值。默认命中阈值均为0.5。

    实际应用前,需使用效果验证功能,定位合适的阈值范围。每个模型版本有1000张效果验证余量。验证完成后,回到本页面【编辑模型】调整模型命中阈值,再进行发布。点击【效果校验】按钮,进入效果验证页面。

    具体操作请见【效果验证】章节

    img

    img

    1.1.4 模型发布

    待发布的模型版本,经效果验证、确认阈值后,点击【发布】。如当前模型无生效中版本,则可以直接发布,如有生效中版本,本次发布将直接进行线上版本替换,原生效中版本将下线。

    img

    1.1.5 模型下线

    已上线的模型,如关联的业务已无需使用,可在【业务配置】处取消勾选后,回到本页面点击【下线】。已下线的模型,状态回到【训练完成】,此时不对线上任何检测生效。

    img

    11.1.5 模型删除

    针对非【已上线】的模型,可点击【删除】,模型删除后,效果验证的数据详情、关联的数据集

    img

    1.2 数据集管理

    1.2.1 创建数据集

    创建模型后,须为模型绑定关联训练数据集才可开始训练。从模型管理页面点击【查看数据】,进入数据集管理页面,。

    创建数据集:创建数据集,可通过本地文件上传。一个模型版本上传50~200张即可,单次上传最多200张

    img

    编辑数据集:未关联模型,或关联模型待训练的数据集,可以编辑数据集信息、更换关联模型。

    img

    查看数据:查看数据集内的数据详情。待训练的数据集可以添加、删除数据。

    img

    1.3 效果验证

    模型管理页点击【效果校验】,进入效果验证页面,可用于创建验证任务、查看验证任务状态及结果。点击【查看】可进入任务详情页面。img img

    1.3.1 创建效果验证任务

    点击【新建效果验证数据集】,打开弹窗。选择需验证的模型及版本,上传效果验证数据集,效果验证数据集支持两种上传方式:

    本地上传:可上传最多200张。上传后,需针对所有效果验证图片数据标注期望结果,即【命中/未命中】表示,默认标注为命中,可根据实际期望修改。

    img

    批量上传:下载模版,根据模版要求,填写外网可访问的图片URL、图片名称、type(0为正样本即期望命中,1为负样本即期望未命中)

    img

    img 点击【去验证】,即完成任务创建,开始验证。

    1.3.2 效果验证结果

    效果验证结果体现为准确率指标。即:当前阈值下,检测成功的数据中,模型实际识别结果与标注的期望结果一致的数据量占比。 img

    点击【查看】可进入效果验证结果页,查看每张验证数据在当前阈值下的期望结果、识别结果及【正确/错误】标签。

    默认效果验证阈值取【模型管理页面】 - 【模型命中阈值】字段值。检测分数高于命中阈值的识别结果为命中,低于命中阈值的识别结果为未命中。

    当识别结果=期望结果时,该条数据在当前阈值下为准确识别。 img

    阈值调试:

    可以在效果验证结果中通过修改【当前命中阈值】的值,快速预览不同阈值下的命中情况、准确率,确定最终模型阈值。(此处调整仅用于调试预览,不对线上及真实验证任务结果生效)

    回到【模型管理页面】编辑,将阈值修改为效果验证页面调试得到的最终阈值后,进行模型发布。

    1.4 正式使用

    业务配置:

    发布上线的模型,可通过【产品业务管理】 - 【业务管理】 - 【业务配置】配置绑定到相关图片类型检测业务,作为该业务机器检测辅助模型,分析图片内容。

    img

    平台内结果获取:

    识别到的自训练模型内容,可通过【图片审核/图片查询】 - 【增值信息】 - 【自训练模型结果】弹窗体现。

    img

    接口结果获取:

    图片检测结果获取接口,disern - details结构下,type100表示自训练模型,discernKey表示自训练模型识别结果。

    Online Chat Tel:95163223 Free trial