查看原文
其他

便携式动捕设备mocopi:六个传感器搞定全身动捕 |「文娱科技」

东西文娱 2023-10-23

The following article is from 共同虚拟 Author 东西文娱

文娱科技,

上期Sequin AR(见文末)
关注文化娱乐科技的产品化与场景应用
欢迎投稿与交流,联系请见文末

期,索尼宣布推出便携式动作捕捉设备“mocopi”。仅需具备专利技术的小型轻量传感器和智能手机(配备专用应用程序) ,便能实现动作捕捉。

该商品可在索尼的网上直销网站“索尼商店”中购买和预约。预定在12月中旬开始接受预约,2023年1月下旬正式开始销售。

该产品不仅可以在室内外轻松实现包含全身动作的化身视频和运动数据的制作,而且还可以在VRChat等兼容服务上作为运动输入设备进行实时化身操作。通常情况下,使用动作捕捉的视频制作需要专用设备和操作人员。“mocopi”利用索尼的专有算法,通过使用少量的传感器实现高精度的运动测量,从而使vtuber以及电影和动画制作人员摆脱时间和地点的限制。

此外,计划从12月15日开始提供软件开发工具包(Software Development Kit,以下简称SDK),可以将获得的运动数据与Metaverse和3D开发软件的服务相联系。除了提高虚拟空间中视频的表达自由度之外,SDK还将扩大运动数据(如全身跟踪)的活动应用范围,从而使元宇宙和健身等领域的新服务得到发展。

今后,索尼将努力扩大与“mocopi”合作开发服务的合作伙伴。值得注意的是,在HIKKY组织的“2022年冬季虚拟市场”上将展示介绍“mocopi”。该活动于12月3日至18日在Metaverse上举行。“mocopi”与HIKKY独自研发的元宇宙开发引擎“Vket Cloud”兼容。

点击视频,了解更多



     

三大主要特征:仅需六个传感器和一台智能手机就可实现全身动捕

1.通过小巧轻型,易于安装的传感器,可进行数据采集和运动输入

将直径为32毫米 × 厚度为11.6毫米、重量为8克的小型传感器安装在6个位置(头部、双手腕、腰部和双脚踝) ,并通过蓝牙连接到安装了专用应用程序的智能手机上,从而可以制作化身视频和运动数据。

数据采集采用索尼独有的算法,以少量的传感器实现高精度的运动测量。

每个传感器都可以用附带的尼龙搭扣带或夹子轻松地固定在身体上,而且完全无线,所以不受电源或电缆的限制。有了本商品和智能手机,除了可以在户外轻松制作运动数据外,还可以向VRChat等兼容服务输入动作。


2.仅需智能手机便能实现化身视频的制作和数据输出

专用应用程序允许用户使用从佩戴的传感器中获取的数据来操纵化身,并在智能手机上制作化身视频。除了默认素材之外,还可以通过导入外部数据来设置。创建的化身视频可以作为视频数据(如mp4)或运动数据在应用程序上导出并保存在智能手机上。


3.开始提供与面向metverse服务和3d开发软件相结合的SDK

从12月15日开始,索尼预计提供将从“mocopi”中获得的运动数据与面向metverse服务和3d开发软件相结合的SDK。通过使用SDK,用户可以在PC上实时接收传感器的运动数据,并通过unity和motionbuilder等3d开发软件进行即时查看和编辑,还可以通过社交平台上的应用程序进行配信。SDK将扩大运动数据的应用范围,有助于元宇宙和健身等领域的新服务开发。


 

低成本驱动化身经济,
后续生态伙伴将扩容

在新品发布会上,关于mocopi的开发背景,索尼新业务和技术开发部的运动业务促进办公室总经理相见猛列举了“使用化身的案例不断增加”。

相见猛表示,“随着元宇宙市场的兴起,通过化身的交流越来越多。VTuber的粉丝数和收益甚至和头部层一样多,索尼集团也开始了VTuber有关活动。使用化身以多样化的方式表达自身已成为一种趋势,索尼公司希望尽可能尝试能做的事。”

“mocopi”这一名字源自于“轻松复制运动”。初次使用时设备需与智能手机配对并校准。之后,化身会随着用户的动作而移动。录制的视频可以保存或外传。

目前,化身有两种选择,一是mocopi的官方化身“RYANOS”,二是人形映像“HUMAN”。除此之外用户还可以导入已有的化身。

mocopi还支持录音功能,化身唇部配合声音而动。mocopi可以连续进行10个小时的动作捕捉,但由于传感器的位置偏差会累积,因此每30分钟需要重新校准一次。另外需要注意的是,动作捕捉必须在双脚着地的情况下进行,所以如果用户躺着或骑着自行车,它将无法正确捕捉。

外界认为,Mocopi 可以说是一个使元宇宙更贴近人们生活的设备。只需一部智能手机,任何人都可以变身为 vTuber,不受地点和设备的限制,对于现有的 vTuber 来说,户外录制和全程跟踪也可以拓宽其表现范围。VRchat 也是如此,支持全程跟踪无疑会提升体验价值。通过开放SDK,后续可以期待以 mocopi 为起点的新视频内容。

VRChat inc.CTO兼联合创始人Jesse Jordley表示,VRChat在使用PC VR头显进行全面跟踪的领域一直处于领先地位。现在,随着索尼“mocopi”的到来,能够为独立的VR头显提供同样的功能。“结合mocopi,我们希望所有类型的VR头显用户都能充分体验到VRChat的全面跟踪功能。”

株式会社HIKKY CEO舟越靖表示,“非常高兴像索尼这样的国际公司够用他们“大胆”的产品来迎接充满活力的新市场。像这样的设备在我们手中开发和销售的难度很大,但它们对于解决市场的本质问题至关重要。我们相信,这个由索尼尖端技术和知识提供的设备,将创造许多创意革新的机会。”

「文娱科技」

Hello!
我们在为更加闭环、更加高效的服务模式做准备
欢迎加入限定白名单
与我们一起探索




您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存