首页 > 专业知识 > 在元宇宙里跳舞，舞蹈SaaS平台「踏歌」做了款舞蹈数字人

在元宇宙里跳舞，舞蹈SaaS平台「踏歌」做了款舞蹈数字人

晰数塔互联网快讯
2022-02-18 07:51

如果玩家不穿全套动作捕捉设备，未来自己的虚拟形象若想在元宇宙里跳舞，有点儿难。其次，制作复杂且有美感的舞蹈动作，对于数字人厂商来说，也是个门槛儿。36氪获悉，「踏歌」可以为游戏厂商、广告商等提供虚拟人舞蹈和音乐解决方案。

踏歌（北京遒歌科技有限公司）成立于2021年4月，为舞蹈工作室提供Saas平台是踏歌的主体业务，基于SaaS平台，踏歌衍生出了超写实舞蹈数字人解决方案、舞蹈与音乐领域数字藏品等业务。

「踏歌」为SPY舞室打造超写实舞蹈数字人「舞踏思」

SaaS业务方面，舞室将自制舞蹈课程上传至踏歌舞蹈云平台，供其学员在课下使用踏歌APP进行热身、复习和打卡。另一方面，舞室学员打开「踏歌APP」，将摄像头对准自己，像玩游戏一样学习跳舞，手机摄像头姿态识别算法自动识别学员舞蹈动作，“老师”对其舞蹈进行拆解动作、识别舞风、打分、纠错。

这套动作姿态识别算法基于大量舞蹈动作积累，“舞室老师会穿上我们的动作捕捉设备，或者前往动捕基地进行舞蹈录制”，据创始人李迪介绍，踏歌已经积累了爵士舞动作姿态数据内容库，而爵士舞是女性群体中受众最广的舞种之一。

技术方面，舞蹈动作复杂且变化速度快，对视觉算法的处理速度有很高要求。踏歌使用的手机摄像头姿态识别算法，采用“动作捕捉+视觉识别”方案采集舞蹈动作。该算法在某款中等配置手机上做到了20ms处理一帧，相同硬件平台下是Google ML kit耗时的1/3。依托于这一高效的移动平台摄像头姿态识别算法，踏歌可以衍生出其它玩法以增强护城河，例如舞蹈数字人。

据李迪介绍，从舞蹈数字人应用场景来看，数字人可以在音乐首发MV里跳舞，未来踏歌还可以为游戏开发者、广告主等提供舞蹈解决方案。“制作超写实数字人模型是一个竞争日益激烈且劳动密集型的业务。为了做出特色和深度，踏歌专注于让超写实数字人跳最专业、最流畅的舞蹈这一个细分领域。现在，每一个消费品公司都在制作自己的超写实数字人，如果他们的数字人已经由其他公司制作完成，但想跳最专业的的舞蹈动作，就可以采用踏歌提供的方案。”

围绕舞蹈，李迪还希望踏歌可以为舞者们带来持续的创作者收入。为此，踏歌开发了数字藏品小程序，将舞者的照片、动作视频等制作成数字藏品，限量发行。同时，踏歌认为数字藏品平台在满足监管要求下，应当进行更多业务创新。据悉，踏歌为某头部舞者在短视频平台走红的舞蹈动作进行了动作捕捉，将产生的动作文件作为广告资产和游戏资产通过踏歌数字藏品平台销售给了广告主和游戏开发者，相关细节会在近期披露。

「踏歌」数字藏品小程序

李迪向36氪介绍，“踏歌做的事情，用一句话概括，就是做元宇宙领域的舞蹈与音乐的C端应用。短期内实现的路径是通过SaaS平台链接舞室这样的KA用户，从而获取舞室背后的C端用户。未来，踏歌还会拓展纯C端业务，打造面向C端的舞蹈线上游戏平台，引入丰富的游戏机制，让玩家通过手机完成跟跳、pk、录制，甚至参与线上迪厅，最终形成类似'全民K歌'的舞蹈线上社区。”

销售拓展方面，踏歌通过与「SPY舞室」建立深度合作关系，链接到了全国数百家头部舞室。SPY舞室是中国舞蹈家协会街舞委员会常务理事单位，具有示范效应。据李迪介绍，线下舞蹈学习是一个高客单价的业务。一个二三线城市头部舞室的典型画像是拥有10~20家连锁门店，年卡客单价4000~8000，年营收能达到3000-5000万元左右。“舞室采用预付费方式，现金流很好。如果我们通过服务中大城市头部舞室这样的KA客户，未来一年获得10万学员，每个学员平均贡献200元，一年就有2000万的收入。”

踏歌项目始于2020年，创始人李迪贡献了踏歌的计算机视觉算法、姿态匹配算法、SaaS平台、游戏客户端开发、超写实数字人区块链平台等技术早期大部分代码。目前，踏歌APP1.0版本及踏歌数字藏品小程序已在种子用户中内测，即将上线。

踏歌创始团队来自腾讯、Facebook（Meta）、百度、平安科技、华纳音乐、协和医院，团队员工中有很多专业舞者和顶尖音乐人。创始人李迪为北京邮电大学人工智能学院硕士，曾在字节跳动、腾讯做过NLP和CV方面的算法和工程工作；CV算法负责人为中科院计算所计算机视觉方向硕士，平安科技智能视觉部门资深算法工程师，主要负责深耕计算机视觉方向；VR平台负责人为美国罗切斯特大学光学硕士原苹果（硅谷）公司光学模组工程师，原Meta Oculus 工程师，曾负责过Oculus Quest等VR产品的光学零部件和模组的供应链端开发制造，负责踏歌项目的VR 硬件及线下跳舞机硬件方案整合；音乐方向产品负责人Lizzy为亚洲第一女DJ。