Literature review of contextual information construction and applications in mixed reality
Haozhong Yang, Wentong Shu, Wang Miao · Journal of Image and Graphics · 2024
随着信息技术的发展，混合现实（mixed reality， MR）技术已应用于医疗、教育和辅助引导等众多领域。MR场景包含丰富的语义信息，基于场景上下文信息的混合现实技术可以改善用户对场景的感知，优化用户的交互操作、提升交互模型的准确度，受到广泛关注。然而，目前在该领域没有针对上下文信息进行调查的综述类文献，缺乏梳理与分类。本文的研究对象是使用上下文信息的MR技术与系统。通过对MR领域的文献调研，本文提出了3个研究问题，并对国外近20年的33篇实证研究论文进行分析，概述了使用上下文信息的MR技术的最新发展，从3个维度出发进行分类学研究并分别提出分类标准，如上下文信息种类、上下文知识库的构建方式和应用领域等。其中，上下文信息的种类可以分为场景语义、对象语义、空间关系、群组关系、从属关系和运动信息6类，知识库的构建按用户介入角度和基础技术类型划分，应用领域从场景类型和生成式特性出发进行分类。通过对不同维度对研究对象的分类，本文对提出的研究问题进行了回应，并总结了现阶段的不足以及未来可能的研究方向。本综述可以辅助不同领域的研究人员对上下文信息的设计、选择和评估，从而推动未来混合现实应用技术与系统的研发。