基本信息:
- 专利标题： 基于特征表示增强的视频时刻检索方法
- 申请号：CN202410022190.0 申请日：2024-01-05
- 公开(公告)号：CN117851629A 公开(公告)日：2024-04-09
- 发明人： 王笛 , 卢宪涛 , 王泉 , 万波 , 罗雪梅 , 王义峰 , 刘锦辉 , 赵辉 , 潘蓉 , 田玉敏
- 申请人： 西安电子科技大学
- 申请人地址： 陕西省西安市太白南路2号
- 专利权人： 西安电子科技大学
- 当前专利权人： 西安电子科技大学
- 当前专利权人地址： 陕西省西安市太白南路2号
- 代理机构： 陕西电子工业专利中心
- 代理人： 田文英; 王品华
- 主分类号： G06F16/58
- IPC分类号： G06F16/58 ; G06F16/583 ; G06V20/40 ; G06V10/80 ; G06V10/82 ; G06V10/40 ; G06N3/0464 ; G06N3/084
摘要：
本发明公开了一种基于特征表示增强的视频时刻检索方法，其步骤为：生成训练集；构建视频时刻检索网络；训练视频时刻检索网络；检索视频时刻。本发明构建了基于特征表示增强的视频时刻检索网络，在查询特征提取模块加入查询时序修正操作，使待查询语句中描述不同动作的所有主谓宾三元组按照其对应动作发生的时间顺序排列，实现跨模态特征序列顺序匹配，降低跨模态语义对齐难度。本发明构建了双连接图卷积模块，将候选片段特征作为图节点，通过图卷积将候选片段与前后两部分的全局候选片段连接，实现候选片段特征与视频全局特征的融合，提高候选片段特征表示质量。
IPC结构图谱:
| G | 物理 |
| --G06 | 计算；推算；计数 |
| ----G06F | 电数字数据处理 |
| ------G06F16/00 | 信息检索；数据库结构；文件系统结构 |
| --------G06F16/10 | .文件系统；文件服务器 |
| ----------G06F16/58 | ..使用元数据的特征检索，例如，不来自内容或者元数据派生的 |