稿件标题: | 基于具身交互的听觉数字孪生及无人机作战应用 |
稿件作者: | 靳聪1,吴凤鹃1,李波2,郭子淳3,王晶4 |
DOI: | 10.11809/bqzbgcxb2023.12.034 |
科学编辑: | 姚寿文(北京理工大学副教授) |
栏目名称: | 信息科学与控制工程 |
关键词: | 数字孪生; 军事虚拟仿真; 扩展现实; 具身交互; 空间音频 |
文章摘要: | 听觉数字孪生技术应用在扩展现实、军事虚拟仿真、游戏交互中是必不可少的,以实现身临其境的视听体验。音频的空间化渲染必须与视觉反馈一致,并以最小的延迟响应时间和用户动作进行具身交互。声音的波动性对逼真的具身交互和沉浸式渲染提出了严峻的挑战,并导致巨大的计算成本。从封闭到开放、静态到动态、室内和室外混合区域的虚拟场景到虚实融合的扩展现实体验,带来了运算复杂度的剧增。以一种音频视角来实现“以人为本”的模拟听众和数字孪生体之间的映射关系,通过听觉数字孪生体描述听者和虚拟环境之间的交互行动,建立基于具身交互的面向无人机作战场景的听觉数字孪生系统,实现了扩展现实体验下的空间音频孪生及多感官具身交互,讨论了无人机作战场景下的应用。 |
稿件基金: | 国家自然科学基金项目(62207029);国家重点研发计划项目(2018YFB1403903);中国传媒大学中央高校基本科研业务费(CUC220B018) |
引用本文格式: | 靳聪,吴凤鹃,李波,等.基于具身交互的听觉数字孪生及无人机作战应用[J].兵器装备工程学报,2023,44(12):256-262. JIN Cong, WU Fengjuan, LI Bo, et al.Embodied interactionbased auditory digital twin and application in UAV[J].Journal of Ordnance Equipment Engineering,2023,44(12):256-262. |
刊期名称: | 2023年12期 |
出版时间: | 2023年12月 |
上线时间: | 2023年12月28日 |
浏览次数: | 1491 |
下载次数: | 55 |
免费阅读PDF 在线阅读 下载本期目录 下载本期封面 |