金融界2024年1月27日消息,据国家知识产权局公告,杰创智能科技股份有限公司取得一项名为“视频表征学习、预训练方法及装置、电子设备、存储介质“,授权公告号CN112016682B,申请日期为2020年8月。
专利摘要显示,本发明实施例提供一种视频表征学习、预训练方法及装置、电子设备、存储介质,包括:采集样本视频中预设的第一视频片段作为中心,采集样本视频中、与中心处于相同时间片段、不同空间位置的第二视频片段作为正例;采集与中心不同时间片段的第三视频片段作为负例;分别提取出中心视频特征、正例视频特征、负例视频特征;通过对中心视频特征、正例视频特征、负例视频特征计算时序判别学习损失,提高时序相似对的特征相似度,降低时序不相似对的特征相似度,优化神经网络,其中,所述时序相似对包括中心和正例,时序不相似对包括中心和负例。本发明实施例通过从单一视频生成时序三元组的做法,提出高效的优化方法来提高模型对视频的表征能力。