更多
通知
医学文献 >>
  • 检索发现
  • 增强检索
知识库 >>
  • 临床诊疗知识库
  • 中医药知识库
评价分析 >>
  • 机构
  • 作者
默认
×
更多
在国内外文献保障系统中检索
高级检索 检索偏好
热搜词：
换一批
  • 二次检索
  • 检索历史
论文 期刊
取消
高级检索

检索历史 清除

首页 > 智能安全 > 眼动—语言跨模态共指消解方法

眼动—语言跨模态共指消解方法

Object referring with language and human gaze

导出 在线阅读 解读 下载全文 终端阅读

二维码有效期 120s

点击刷新
注：终端设备浏览有效期：
 学术成果认领
打印 收藏 分享
  • 新浪微博
  • 微信
  • QQ空间
  • 豆瓣
 纠错

摘要跨模态共指消解是根据人员交互意图对自然图像中所指目标进行定位,作为智能人机交互领域的关键技术之一,能够应用于抢险救灾、家庭服务或养老助残等场景.现有的目标指代方法一般采用单模态信息表现人类意图,例如语言或者眼动等,然而单一的模态用户输入只能够传达有限的交互信息,难以实现自然而智能的人机协同.本文针对这一问题,同时融合眼动和语言信息,建立了跨模态共指消解模型,利用多种模态信息的优势互补,实现人类意图所指目标的图像定位任务;设计了对比试验,验证了本文提出的眼动—语言跨模态的融合方法性能优于单模态的输入形式.

更多

相关知识

查看相关文献
广告
作者 张珺倩 [1] 宋明武 [2] 谢良 [3] 张亚坤 [3] 印二威 [3] 闫野 [3] 学术成果认领
作者单位 天津大学医学工程与转化医学研究院,天津 300072;天津人工智能创新中心,天津 300450 [1] 天津人工智能创新中心,天津 300450 [2] 国防科技创新研究院,北京 100071;天津人工智能创新中心,天津 300450 [3]
关键词 深度学习跨模态目标定位眼动自然语言处理deep learningmulti-modallocalizationgazenatural language processing
分类号 TP391
栏目名称
发展综述
DOI 10.12407/j.issn.2097-2075.2022.01.089
发布时间 2023-10-30（万方平台首次上网日期，不代表论文的发表时间）
  • 浏览2
  • 被引0
  • 下载1
智能安全

智能安全

2022年1卷1期

89-95页

加载中！

相似文献

  • 中文期刊
  • 外文期刊
  • 学位论文
  • 会议论文

加载中！

加载中！

加载中！

加载中！

  • 浏览2
  • 被引0
  • 下载1
智能安全

智能安全

2022年1卷1期

89-95页

相关期刊

加载中！

法律状态公告日 法律状态 法律状态信息

特别提示：本网站仅提供医学学术资源服务，不销售任何药品和器械，有关药品和器械的销售信息，请查阅其他网站。

  • 客服热线：4000-115-888 转3 (周一至周五：8:00至17:00)

  • |

  • 客服邮箱：yiyao@wanfangdata.com.cn

  • 违法和不良信息举报电话：4000-115-888，举报邮箱：problem@wanfangdata.com.cn，举报专区

官方微信
万方医学小程序
new医文AI 翻译 充值 订阅 收藏 移动端

官方微信

万方医学小程序

使用
帮助
Alternate Text
调查问卷