一种基于深度融合哈希的大数据跨模态检索方法及系统

扫码查看

原文链接

NSTL
万方数据

中文摘要：本发明提供一种基于深度融合哈希的大数据跨模态检索方法，包括：识别待检索数据的数据类型，若待检索数据的数据类型为图像，则将待检索的图像输入到训练后的图像哈希网络中，获取所述待检索的图像对应的图像二进制码；计算所述待检索图像对应的图像二进制码和检索库中每一条语句对应的二进制码的第一汉明距离；在所述检索库中选取第一汉明距离最小的预设数量的语句作为待检索数据的数据类型为图像的检索结果。本发明提供的基于深度融合哈希的大数据跨模态检索方法及系统，通过捕获视觉数据和自然语言之间的内在交叉对应关系，从而在端到端深度学习架构中生成图像和语句的紧凑哈希码，提高了跨模态检索的准确率。

申请号：

CN201711184981.X

公开号：

CN107871014A

专利类型：

发明专利

申请日：

2017-11-23

公开日：

2018-04-03

IPC分类：

G06F17/30(20060101)

申请人：

清华大学

发明人：

曹越、王建民、刘斌、龙明盛

主申请人地址：

100084 北京市海淀区清华园北京100084-82信箱

国别省市代码：

中国(CN)