跳到主内容
音乐与舞蹈

一种具备自动评估功能的高效沉浸式嘻哈舞蹈自主训练系统

An Efficient Immersive Self-Training System for Hip-Hop Dance Performance with Automatic Evaluation Features

Kazuhiro Esaki, Katashi Nagao

Applied Sciences · 2024-07-09

开放获取音乐与舞蹈被引 12被引前 10%影响因子 ≈4.1

摘要

舞蹈作为一种重要的身体表达形式,其技能提升尤其是表现力的提高需要持续训练。然而,此类训练往往受到时间和空间的限制。此外,舞蹈表演的评估往往具有主观性,因此亟需开发有效的训练方法与客观的评价技术。在本研究中,我们提出了一种基于虚拟现实技术的舞蹈自主训练系统,该系统能够构建沉浸式训练环境,帮助练习者全面理解三维舞蹈动作。该系统还采用了无标记动作捕捉技术,可实时精准记录舞者的动作并将其同步至虚拟形象上。借助深度学习技术,系统能够从多个视角对舞蹈表演进行评估,并向用户反馈结果以辅助其反复练习。为了支撑基于深度学习的舞蹈评估功能,我们构建了一个包含初学者舞蹈数据及相应专家评价的数据集。该数据集是在舞蹈工作室环境中,通过四台摄像机录制舞蹈内容而精心整理的,专家评价则从多个视角给出以确保评估的全面性。本研究还提出了三种独特的自动评估模型。通过对这些模型的对比分析发现,以对比学习(及自编码器)为基础的表现力学习模型以及以专业舞者表演为参照的参考引导模型当中,后者表现出更高的评估精度。相较于专业教练给出的评分,所提方法在10分制评分体系中对舞蹈表演评分的预测误差约为±1分。本研究结果为未来舞蹈训练与评估系统的发展开辟了新途径。

本摘要由 AI(Hy-MT2-Pro)翻译生成,仅供参考,请以原文为准。

AI 综述

基于摘要生成
主要观点
舞蹈训练常受时空限制且评价偏主观,亟需客观有效的自训练方法。结合VR与深度学习的沉浸式自训练系统能有效解决上述问题,其中以模范舞者表演为参考的评估模型在多视角自动评价中表现最优,评分精度接近专业教练水平。
研究方法
采用VR技术构建沉浸式环境,结合无标记动作捕捉技术实时记录并映射舞者动作至虚拟化身。通过多机位录制构建含专家多视角标注的初学者舞蹈数据集,并基于深度学习开发三种自动评估模型进行对比分析。
学术贡献
提出了一套集成VR沉浸式训练与深度学习客观评价的舞蹈自训练系统,打破了传统训练的时空与主观性限制。构建了面向舞蹈室的多视角专家标注数据集,并验证了参考引导模型在舞蹈评估上的优越性,为未来相关系统提供了新思路。
存在局限
材料中未明确提及
进一步研究方向
材料中未明确提及

本综述由 AI(GLM-5-Turbo)基于摘要自动生成,仅供参考,不代表原文作者观点,请以原文为准。

参考文献

相关论文

话题:Human Pose and Action Recognition