基本信息:
- 专利标题： 示意图问答方法及系统
- 申请号：CN202310203670.2 申请日：2023-03-06
- 公开(公告)号：CN116431777A 公开(公告)日：2023-07-14
- 发明人： 何世柱 , 赵军 , 刘康 , 朱敏郡 , 翁诣轩
- 申请人： 中国科学院自动化研究所
- 申请人地址： 北京市海淀区中关村东路95号
- 专利权人： 中国科学院自动化研究所
- 当前专利权人： 中国科学院自动化研究所
- 当前专利权人地址： 北京市海淀区中关村东路95号
- 代理机构： 北京路浩知识产权代理有限公司
- 代理人： 李婧
- 主分类号： G06F16/332
- IPC分类号： G06F16/332 ; G06F16/33 ; G06F16/338
摘要：
本发明提供一种示意图问答方法及系统，该方法包括：获取目标示意图问题，所述目标示意图问题包括目标示意图和所述目标示意图对应的目标问题；将所述目标示意图问题输入到示意图问答模型中，得到所述目标示意图问题对应的预测答案；其中，所述示意图问答模型是由样本示意图问答对和示意图问答对增强数据训练得到的；所述示意图问答对增强数据是通过所述样本示意图问答对构建得到的，包括图像描述增强数据、问题生成增强数据、答案判别增强数据和图文匹配增强数据。本发明基于原始示意图问答对，构建从不同角度理解原始示意图问答对的示意图问答对增强数据，提高了增强数据的准确性，同时提升了示意图问答模型的问答预测性能。
IPC结构图谱:
| G | 物理 |
| --G06 | 计算；推算；计数 |
| ----G06F | 电数字数据处理 |
| ------G06F16/00 | 信息检索；数据库结构；文件系统结构 |
| --------G06F16/10 | .文件系统；文件服务器 |
| ----------G06F16/33 | ..查询 |
| ------------G06F16/332 | ...查询公式 |