面向军事情报的多媒体大数据分析与展示

We are now in big data era, where multimedia rises as the major carrier and important application object. Military intelligence has an obvious.multimedialization trend and exhibits the typical characteristics of big data, such as rapid increase and huge volume, rich sources and diverse types, and low value density. Such characteristics brings not only challenges for multimedia research but also opportunities for emerging applications in military intelligence. This proposal will focus on two key scientific issues: data knowledgization, and knowledge visualization, to research complex multimedia analysis and demonstration. Specific tasks include: (1) researching intelligent multimedia data analysis and obtianing multimedia association knowledge by unified representation learning and knowledge graph construction; (2) researching multimedia resource demonstration and achieving deep and wide demonstration of search results by integrating visualized data selection, heterogeneous and interactive visualization. The research outcome will provide the foundamental theories and key technique support for applications in (1) multimedia military intelligence filtering, mining and analysis; and (2) military intelligence collection, organization and demonstration under the open environment. This is expected to enhance the role of multimedia research in web-based multimedia information awareness, service and regulatory.

人类已经进入大数据时代，多媒体是大数据的主要载体和重要应用对象。军事情报具有显著的多媒体化的趋势，并表现出大数据的典型特征，如增长迅速、体量大，来源丰富、类型多样，价值密度低等。这些大数据特征为多媒体研究带来了挑战，同时为大数据背景下的军事情报应用带来了机遇。面对这些特点，项目凝练了数据知识化和知识可视化两个关键科学问题，研究大数据环境下复杂多媒体的分析和展示。具体包括：研究智能多媒体分析，通过统一表示学习和知识图谱构建获得多媒体关联知识；研究立体多媒体展示，整合可视数据选择、异构可视化和交互可视化，实现搜索结果的深度和广度展示。研究结果有望为多媒体军事情报大数据的筛选、挖掘和分析，以及开放式网络环境下军事情报的收集展示等应用提供基础理论和关键技术支持，使多媒体研究更好地在多媒体信息感知、服务和监管等方面发挥作用。

人类已经进入大数据时代，多媒体是大数据的主要载体和重要应用对象。军事情报具有显著的多媒体化的趋势，并表现出大数据的典型特征，如增长迅速、体量大，来源丰富、类型多样，价值密度低等。这些大数据特征为多媒体研究带来了挑战，同时为大数据背景下的军事情报应用带来了机遇。面对这些特点，项目凝练了数据知识化和知识可视化两个关键科学问题，研究大数据环境下复杂多媒体的分析和展示。具体包括：研究智能多媒体分析，通过统一表示学习和知识图谱构建获得多媒体关联知识；研究立体多媒体展示，整合可视数据选择、异构可视化和交互可视化，实现搜索结果的深度和广度展示。项目研制了军事情报多媒体大数据分析展示系统，研发了网络军事情报多媒体大数据实时采集获取技术，可采集TB级到PB级以上的军事多媒体大数据；建立了大规模军事主题知识图谱构建流程，构建了十万级军事实体知识图谱库；研发了异构多模态军事情报数据语义结构化搜索机制，结构化搜索准确率达到90%以上；提出了多维度立体化的军事情报展示模式，能够便捷地满足军事情报的获取信息与决策的需求。项目发表学术论文72篇，其中IEEE/ACM汇刊论文40篇；包括领域顶级会议ACM Multimedia、CVPR在内的国际会议论文29篇。研究结果能够为多媒体军事情报大数据的筛选、挖掘和分析，以及开放式网络环境下军事情报的收集展示等应用提供基础理论和关键技术支持，使多媒体研究更好地在多媒体信息感知、服务和监管等方面发挥作用。