计算机科学2021,Vol.48Issue(3) :79-86.DOI:10.11896/jsjkx.210200086

跨媒体分析与推理技术研究综述

Overview of Research on Cross-media Analysis and Reasoning Technology

王树徽 闫旭 黄庆明
计算机科学2021,Vol.48Issue(3) :79-86.DOI:10.11896/jsjkx.210200086

跨媒体分析与推理技术研究综述

Overview of Research on Cross-media Analysis and Reasoning Technology

王树徽 1闫旭 1黄庆明1
扫码查看

作者信息

  • 1. 中国科学院计算技术研究所 北京 100190
  • 折叠

摘要

当前,以网络数据为代表的跨媒体数据呈现爆炸式增长的趋势,呈现出了跨模态、跨数据源的复杂关联及动态演化特性,跨媒体分析与推理技术针对多模态信息理解、交互、内容管理等需求,通过构建跨模态、跨平台的语义贯通与统一表征机制,进一步实现分析和推理以及对复杂认知目标的不断逼近,建立语义层级的逻辑推理机制,最终实现跨媒体类人智能推理.文中对跨媒体分析推理技术的研究背景和发展历史进行概述,归纳总结视觉-语言关联等任务的关键技术,并对研究应用进行举例.基于已有结论,分析目前跨媒体分析领域所面临的关键问题,最后探讨未来的发展趋势.

关键词

跨媒体分析与推理/深度学习/多模态融合/视觉-语言分析

引用本文复制引用

基金项目

科技部重点研究发展计划项目(2018AAA0102003)

国家自然科学基金(62022083)

国家自然科学基金(61672497)

中国科学院前沿科学重点研究项目(QYZDJ-SSW-SYS013)

出版年

2021
计算机科学
重庆西南信息有限公司(原科技部西南信息中心)

计算机科学

CSTPCDCSCD北大核心
影响因子:0.944
ISSN:1002-137X
被引量8
参考文献量66
段落导航相关论文