赛尔笔记 | 多模态信息抽取简述

作者：哈工大SCIR 郑子豪摘要现实世界中的信息一般以多模态的形式出现，而由于技术问题，多模态研究进展缓慢。近年来由于单模态研究的进步，多模态的研究有了更扎实的基础。多模态信息抽取是多模态学习与信息抽取技术结合的研究方向，本文介绍了多模态信息处理的一般方法，以及三个多模态信息抽取任务。1. 背景随着互联网的发展，网络所带来的信息呈现爆炸性增长，如何从这些数据中获得我们想要的信息，是亟需解决的问题。信息抽取的主要目标是从无结构的生文本中抽取出结构化、半结构化或非结构化的数据。信息抽取的一般过程是：在从生文本中抽取出信息后，将信息保存到结构化的数据库中，从而用户可以对数据库进行查询和使用。传统信息抽取 ………………………………