兵器装备工程学报

文章详情

稿件标题: 基于具身交互的听觉数字孪生及无人机作战应用
稿件作者: 靳聪1,吴凤鹃1,李波2,郭子淳3,王晶4
DOI: 10.11809/bqzbgcxb2023.12.034
科学编辑: 姚寿文(北京理工大学副教授)
栏目名称: 信息科学与控制工程
关键词: 数字孪生; 军事虚拟仿真; 扩展现实; 具身交互; 空间音频
文章摘要: 听觉数字孪生技术应用在扩展现实、军事虚拟仿真、游戏交互中是必不可少的,以实现身临其境的视听体验。音频的空间化渲染必须与视觉反馈一致,并以最小的延迟响应时间和用户动作进行具身交互。声音的波动性对逼真的具身交互和沉浸式渲染提出了严峻的挑战,并导致巨大的计算成本。从封闭到开放、静态到动态、室内和室外混合区域的虚拟场景到虚实融合的扩展现实体验,带来了运算复杂度的剧增。以一种音频视角来实现“以人为本”的模拟听众和数字孪生体之间的映射关系,通过听觉数字孪生体描述听者和虚拟环境之间的交互行动,建立基于具身交互的面向无人机作战场景的听觉数字孪生系统,实现了扩展现实体验下的空间音频孪生及多感官具身交互,讨论了无人机作战场景下的应用。
稿件基金: 国家自然科学基金项目(62207029);国家重点研发计划项目(2018YFB1403903);中国传媒大学中央高校基本科研业务费(CUC220B018)
引用本文格式: 靳聪,吴凤鹃,李波,等.基于具身交互的听觉数字孪生及无人机作战应用[J].兵器装备工程学报,2023,44(12):256-262.
JIN Cong, WU Fengjuan, LI Bo, et al.Embodied interactionbased auditory digital twin and application in UAV[J].Journal of Ordnance Equipment Engineering,2023,44(12):256-262.
刊期名称: 2023年12期
出版时间: 2023年12月
上线时间: 2023年12月28日
浏览次数: 1491
下载次数: 55
免费阅读PDF 在线阅读 下载本期目录 下载本期封面