收藏本站
收藏 | 投稿 | 手机打开
二维码
手机客户端打开本文

基于多模态知识感知注意力机制的问答方法

张莹莹  钱胜胜  方全  徐常胜  
【摘要】:随着网络的普及,越来越多人遇到身体不适时,会选择在网站上搜索相关症状.随着在线医疗问答网站的出现,如春雨医生、寻医问药等,患者可以便捷地医生交流.现有的问答系统方法,聚焦于词级别的交互与语义信息,却很少考虑在回答问题时,回答者还利用了与问答本身无直接联系的常识.在实际生活中,除了病人的表述,医生还需要额外知识来诊断病人.提出了一个基于多模态知识感知注意力机制的医疗问答方法,它可以有效地利用多模态医疗知识图谱来构建基于知识图谱的问答对之间的交互.该模型首先学习知识图谱中实体的多模态表示;然后从多模态知识图谱中与问答对相关联的实体的路径来推测出回答该问题时的逻辑,并刻画问答对之间的交互关系.此外,该模型还提出了一种注意力机制来判别连接问答对的不同路径之间的重要性.构建了一个大规模的多模态医疗知识图谱和一个医疗问答数据集,实验结果表明:该方法比当前最好的方法准确度提升了2%以上.

知网文化
【相似文献】
中国期刊全文数据库 前16条
1 钟杰;徐军伟;;研究多模态脑影像数据的图像处理及在脑解剖教学中应用[J];课程教育研究;2017年08期
2 黄薇;徐守荣;梁刚;谢成;张士靖;;基于云计算的多模态健康数据服务平台建设研究[J];医学信息学杂志;2017年09期
3 王鸿;;基于多模态教学的医学生跨文化交际能力培养初探[J];校园英语;2019年38期
4 植娟;;多模态在护理教学中的运用[J];护理研究;2011年20期
5 张琳;李想;赵东霞;;“多模态”语境下医学英语教学评价的实证研究[J];教育导刊;2016年07期
6 庄冰冰;;多模态教学模式在高职医学情景口语教学中的应用研究[J];开封文化艺术职业学院学报;2020年02期
7 毛反骄;;继续教育中多模态话语识读能力与创新能力探索[J];明日风尚;2017年09期
8 袁冬青;刘庆淮;张薇玮;;基于多模态影像技术的眼科交互式教学平台的临床医师规范化培训实践教学效果评估[J];教育教学论坛;2020年17期
9 杨丽;刘宏发;王国保;;多模态教学方式在肾内科住院医师规范化培训中的应用[J];中国病案;2018年12期
10 贺伟;周银玲;;多模态教学在护理实训中的应用浅析[J];中国教育技术装备;2014年12期
11 岳蕴之;;论医护英语课堂中多模态协同教学的意义及使用原则[J];中外企业家;2019年10期
12 张景发;黄小军;;基于医学英语网络学习平台多模态教学研究[J];宿州教育学院学报;2016年04期
13 乔春梅;王晓磊;张小杉;王欣;;多模态解剖联合CBL教学法在超声诊断学中的应用[J];内蒙古医科大学学报;2017年S1期
14 李天然;禹名卉;;多模态影像与多学科协作对影像教学影响浅析[J];中国继续医学教育;2018年26期
15 赵慧娟;李恒;;多模态教学模式与应用[J];现代交际;2014年08期
16 陈倩;;“互联网+”背景下多模态高职护理英语教学实践[J];湖北开放职业学院学报;2019年02期
中国知网广告投放
 快捷付款方式  订购知网充值卡  订购热线  帮助中心
  • 400-819-9993
  • 010-62982499
  • 010-62783978