云环境下智慧图书馆移动视觉搜索模型与实现研究

Mobile Visual Search (MVS) is an original search mode, which is designed to search for associated information on the Internet through the input of visual object as search target via mobile intelligent terminals. With the development of cloud computing and big data technologies, MVS can effectively help reads to find information which they are interested, from vast amounts of visual data such as images and video. In the cloud environment, it has become an urgent scientific issue to be addressed in the field of knowledge service of smart library to research how to embed MVS into readers’ various activities in real time and dynamically, whose goal is to realize reader-centered smart services. Therefore, the project will take advantage of the multi-disciplinary theory and method including library science, information science, computer science and management science, and focus the research on mobile visual search model and its implementation method of smart library in cloud environment. First of all, the cloud-based MVS needs are analyzed; and then, the MVS retrieval model and algorithms are explored; in addition, the MVS storage model is established; finally, the architecture of MVS model and its application in the filed of smart library are researched. The project will be of important research significance in innovating the mode of library knowledge services, and thus promoting the theoretical and practical development of smart library.

移动视觉搜索(Mobile Visual Search，MVS)是将移动智能终端获取的视觉对象作为检索对象，通过移动互联网检索其关联信息的一种新型信息检索方式。随着云计算和大数据技术的发展，MVS能够有效地帮助读者从海量的图像、视频等视觉数据中快速获取其感兴趣的信息。因此，在云环境下，如何将MVS实时、动态地嵌入到读者情境活动中，实现以读者为中心的智慧服务成为智慧图书馆知识服务亟待解决的科学问题。为此，项目综合应用图书馆学、情报学、计算机科学、管理学等多个学科的理论和方法，对云环境下智慧图书馆的MVS模型和实现方法展开研究。具体来说，项目首先分析云环境下MVS的读者需求；接着对MVS检索模型和算法进行探索；而后，探索MVS存储模型的构建方法；最后，研究MVS体系结构及其在智慧图书馆领域的应用。本项目对创新图书馆知识服务模式，推动智慧图书馆的理论和实践发展具有重要的研究意义。

移动视觉搜索(Mobile Visual Search，MVS)是将移动智能终端获取的视觉对象作为检索对象，通过移动互联网检索其关联信息的一种新型信息检索方式。随着云计算和大数据技术的发展，MVS能够有效地帮助读者从海量的图像、视频等视觉数据中快速获取其感兴趣的信息。本项目将移动视觉搜索实时、动态地嵌入到用户的场景式活动中，实现以用户为中心的智慧图书馆知识服务，为用户各类活动提供决策支持和服务保障。本项目综合应用图书馆学、情报学、计算机科学、管理学等多个学科的理论和方法，对云环境下智慧图书馆的MVS模型和实现方法展开了系列研究工作。研究内容包括：（1) 提出智慧图书馆移动视觉搜索检索模型，从用户、知识、情境和服务四个维度讨论MVS过程中的用户需求，围绕图像兴趣热区定位、语义鸿沟和用户情境融合三个关键问题系统地研究了MVS检索模型和方法，包括视觉对象的语义映射和语义标注、基于兴趣热区的视觉搜索算法和融合情境的移动视觉搜索算法。（2）研究 MVS 云存储模型构建的关键技术，在此基础上进行 MVS 云存储平台的架构搭建，并对基于云存储的MVS系统体系结构进行设计。（3）开展智慧图书馆移动视觉搜索在数字人文领域的应用和实证研究，构建面向数字人文的移动视觉搜索模型，并从图像语义特征提取和实现快速检索两个方面进行探讨，基于深度学习方法和哈希方法构建了面向数字人文的图像语义特征提取模型，通过数字人文数据集进行模型训练和MVS检索流程实验，实验结果验证了所提出的MVS模型方法的有效性。项目研究完善和扩展了现有的移动视觉搜索模型，创新了知识服务在智慧图书馆领域的理论和方法，并实现在数字人文等领域的应用。因此，研究成果对于完善图书馆知识服务模式，推动智慧图书馆的理论和实践发展具有重要的科学意义。