基本信息:
- 专利标题： 视频摘要生成模型的训练方法、视频摘要生成方法及装置
- 申请号：CN202011057685.5 申请日：2020-09-29
- 公开(公告)号：CN112231516B 公开(公告)日：2024-02-27
- 发明人： 柴振华 , 王君岩 , 白杨 , 胡炳彰 , 龙洋
- 申请人： 北京三快在线科技有限公司
- 申请人地址： 北京市海淀区北四环西路9号2106-030
- 专利权人： 北京三快在线科技有限公司
- 当前专利权人： 北京三快在线科技有限公司
- 当前专利权人地址： 北京市海淀区北四环西路9号2106-030
- 代理机构： 北京三高永信知识产权代理有限责任公司
- 代理人： 唐述灿
- 主分类号： G06F16/738
- IPC分类号： G06F16/738 ; G06F16/74 ; G06T7/00
摘要：
本申请公开了一种视频摘要生成模型的训练方法、视频摘要生成方法及装置，属于机器学习领域。该方法包括：获取视频样本，从视频样本中确定出至少两帧样本图像，每一帧样本图像标注有参考评分；调用视频摘要生成模型分别对每一帧样本图像进行时间特征与空间特征的混合自注意力学习，得到样本图像在时间与空间上的混合特征向量；调用视频摘要生成模型基于混合特征向量对样本图像进行评分，得到每一帧样本图像作为视频摘要的重要性评分；基于参考评分与重要性评分之间的学习损失更新视频摘要生成模型中的模型参数，最终得到训练完成的视频摘要生成模型。该方法使得模型能够更充分的捕捉视频的上下文信息，生成时序表达优秀的视频摘要。
公开/授权文献:
- CN112231516A 视频摘要生成模型的训练方法、视频摘要生成方法及装置 公开/授权日：2021-01-15
IPC结构图谱:
| G | 物理 |
| --G06 | 计算；推算；计数 |
| ----G06F | 电数字数据处理 |
| ------G06F16/00 | 信息检索；数据库结构；文件系统结构 |
| --------G06F16/10 | .文件系统；文件服务器 |
| ----------G06F16/73 | ..查询 |
| ------------G06F16/738 | ...查询结果的可视化 |