技术详细介绍
本发明公开了一种基于公共语义空间学习构建图文知识图谱方法，包括如下步骤：
构建深度神经网络用于图像与文本数据的深度特征提取；将图像与文本数据对oi ＝(xi，li，yi)分别输入到深度神经网络中训练；其中oi 表示第i对图像‑文本对数据以及对应的标签，xi ，yi 与li 分别表示第i个图像数据、文本数据以及对应的标签数据；通过损失函数学习两种图像和文本数据间的公共语义表达，并将图像与文本特征转化到公共语义空间中；根据相似度度量，依据CN‑DBpedia的构建方法构建知识图谱。
本发明提供的方法能有效实现图像、文本两种不同的模态间的知识图谱构建。