首页|行业资讯|企业名录|周边产品|数字城市|增强现实|工业仿真|解决方案|虚拟医疗|行业仿真|图形处理|军事战场
资讯首页
行业资讯 >> 应用前沿>>正文
加拿大使用数据手套通过手势说话谱曲
2012年2月23日    评论:    分享:

    来源:新华网

    有些人喜欢边说话边打手势。借助加拿大研究人员研制的一种特殊手套,未来他们或许能够用手势说话甚至谱曲。

  新式“手语”

  加拿大不列颠哥伦比亚大学的电子和计算机工程教授悉尼·费尔斯研制出一种3D交互式手套,戴上它,使用者做出的各种手势可合成为乐曲或一段话。他们在温哥华参加美国科学促进会年会时展示了相关成果。

  在英语体系中,以元音结尾的音节叫做开音节,以辅音结尾的音节叫做闭音节。人说开音节时喉咙和嘴唇会张开,研究人员力图通过程序复制出人说话时喉咙和舌头的位移,从而达到用手势说话。

  手套上有3D位置传感器,可以追踪手势信号,然后传至电脑。根据设计好的程序,两只手的不同手势代表不同声音片段。比如,右手握紧代表辅音,张开代表元音;左手控制音节的长短;右手抬起时代表高声调,处于水平位置时是平声调。

  3D交互   

  费尔斯等人给这个项目取名“电子口技表演者”。演示视频中,一名研究人员戴上特制手套,一会儿把手指相对或张开,一会儿挥动手臂,随着手势变化,与电脑相连的扬声器中传出高低起伏的不同声音。另一段视频中,一名戴着手套的女歌唱家边演唱边做手势,于是,清唱演变成一段配乐演唱。

  手套基于3D交互输入技术研制。研究显示,手势不仅由骨骼肌肉驱动,而且受人的信念、意识的驱使,是涉及人的思维活动的高级行为。在虚拟现实系统中,手是用户模型中十分重要的动作与感知关系模型,而手势则是3D交互任务和技术的手段。

  费尔斯先前开发出“手套交谈”系统,采用神经网络将用户手势转换成手势语言参数,通过语言合成器合成为语言输出。

  实际应用   

  研究人员说,他们的研究初衷是帮助失去语言能力的人“说话”。 加拿大电视网19日援引研究人员的话报道,“它让传统意义上不能讲话的人发出声音,但又不同于手语,因为使用者不必特意去学习手势的含义”。

  随着研究的深入,他们为它赋予音乐才能,“让人们用手势唱歌”。

  这项技术现阶段还存在不足,比如,说出带有情感色彩的词时,它的声音还不够拟人,而是像机器人(20.890,0.94,4.71%)讲话。此外,学习如何操作需要大约100小时。

  费尔斯说,这项发明未来的应用还包括引入生物力学模型,挪动重型机械设备等。

标签:数据手套动作捕捉
上一篇:数据头盔(头盔显示器:HMD)发展进程简介
下一篇:[视频]亚洲首个湾流G550飞行模拟器落户香港
网友评论:加拿大使用数据手套通过手势说话谱曲
评论
留名: 验证码:
您可能还需要关注一下内容:
·力反馈数据手套在核能虚拟仿真中的应用研究
·星球崛起2中的动作捕捉和分析技术
·Omni虚拟现实跑步机即将开卖 约3100元
·SIGGRAPH 2014 微软头发动态运动捕捉和三维重建
·eBay收购3D虚拟试衣公司PhiSix
·PrioVR动作捕捉技术实现FPS游戏精准控制
·PrioVR传感套装 全身追踪可穿戴设备
·3D版江南style-3D拍摄与动作捕捉制作
·电影中的那些高科技交互技术
·美研发新型纳米电路,可制作带有感觉的电子皮肤
☏ 推荐产品

Ladybug5全景
商家:力方国际

ProJet®
商家:力方国际

ProJet®
商家:视科创新

Premium1.5
商家:视科创新

巴可HDX主动立体投
商家:德浩科视

巴可HDF-W26投
商家:德浩科视

巴可30000流明2
商家:德浩科视

巴可4万流明2K投影
商家:德浩科视
☞ 外设导航
☏ 企业名录
【广州】中科院广州电子技术有限公司
【北京】第二空间(北京)科技有限公司
【北京】幻维世界(北京)网络科技有限公司
【厦门】厦门惠拓动漫科技有限公司
【厦门】厦门幻眼信息科技有限公司
【深圳】深圳南方百捷文化传播有限公司
【北京】北京思源科安信息技术有限公司
【上海】上海殊未信息科技有限公司
【北京】北京赢康科技开发有限公司
【武汉】武汉科码软件有限公司
友情链接 关于本站 咨询策划 行业推广 广告服务 免责声明 网站建设 联系我们 融资计划
北京第三维度科技有限公司 版权所有 京ICP备09001338
2008-2016 Beijing The third dimension Inc. All Rights Reserved.
Tel:010-57255801 Mob:13371637112(24小时)
Email:d3dweb@163.com  QQ:496466882
扫一扫 第三维度
官方微信号