[发明专利] 一种模型训练方法、终端设备及计算机存储介质 – CN114065834A 全文链接一   全文链接二

 
基本信息
申请号
CN202111164452.X
申请日
20210930
公开(公告)号
CN114065834A
公开(公告)日
20220218
申请(专利权)人
中国科学院深圳先进技术研究院
申请人地址
518055 广东省深圳市南山区深圳大学城学苑大道1068号
发明人
周翊民;黄仲浩 专利类型 发明专利
摘要
本申请提供了一种模型训练方法、终端设备以及计算机存储介质。该模型训练方法包括:获取待训练图像;采用待训练图像训练多个阶段的老师模型;利用不同阶段的老师模型分别对学生模型进行训练,获取每个阶段的老师模型和学生模型对待训练图像的识别结果;按照识别结果获取老师模型的预测输出值和学生模型的预测输出值,并利用学生模型的预测输出值和老师模型的预测输出值计算学生模型的损失值,以及按照损失值调整所述学生模型的模型参数。通过上述方式,本申请的模型训练方法采用多个阶段的老师模型分别对不同阶段的学生模型进行训练,从而使得学生模型在假扮老师模型的过程中不断接近甚至超过老师模型的性能。
主权项
1.一种模型训练方法,其特征在于,所述模型训练方法包括:获取待训练图像;采用所述待训练图像训练多个阶段的老师模型;利用不同阶段的老师模型分别对学生模型进行训练,获取每个阶段的老师模型和学生模型对所述待训练图像的识别结果;按照所述识别结果获取老师模型的预测输出值和学生模型的预测输出值,并利用所述学生模型的预测输出值和所述老师模型的预测输出值计算所述学生模型的损失值,以及按照所述损失值调整所述学生模型的模型参数。

 

 
IPC信息
IPC主分类号
G06K9/62
G 物理

G06 计算;推算;计数

G06K 数据识别;数据表示;记录载体;记录载体的处理

G06K9/62 应用电子设备进行识别的方法或装置(学习机入G06F15/18;数字相关性法入G06F17/15;模拟相关性入G06G7/19)〔3〕

 

 
法律状态信息
法律状态公告日
20220218
法律状态
公开 法律状态信息
CN202111164452 20220218 公开 公开

 

 
代理信息
代理机构名称
深圳市铭粤知识产权代理有限公司 44304
代理人姓名
孙伟峰;武岑飞