查看原文
其他

腾讯云“出海”韩国3D虚拟社交:与《泡泡堂》开发商Nexon基于常用实时音视频技术共建虚拟社区平台|「游戏日」

东西文娱 2023-10-23

The following article is from 东西游戏 Author 东西游戏

游戏日,

上期"宝可梦:朱/紫"(见文末)

聚焦游戏技术与体验迭代

带来的产业机遇与娱乐创新

欢迎投稿与交流,联系请见文末

更多游戏案例与技术应用研究

请关注东西文娱游戏组品牌账号


近期,韩国游戏开发商Nexon宣布与腾讯云达成合作,双方将基于腾讯云的实时音视频(TRTC)技术,共同搭建虚拟世界社区平台NEXONTOWN。

Nexon作为韩国老牌游戏公司,拥有诸多经典游戏IP,如《地下城与勇士》《跑跑卡丁车》等。近年来,韩国游戏公司纷纷向元宇宙、Web 3领域靠拢,寻求新的增长机会。Nexon也不例外,早些时候启动了元宇宙平台《冒险岛世界(Maple Story Worlds)》的测试运营,《冒险岛世界》基于《冒险岛》IP的素材资源,用户可以利用素材创造自己的世界,Nexon将其定位为类似Roblox的UGC平台。

点击视频,了解更多

近期推出的NEXONTOWN则将Nexon旗下《冒险岛》《洛奇(Mabinogi)》《泡泡堂》等经典游戏IP联合起来,旨在为不同游戏的玩家创造共同的沟通空间。NEXONTOWN的开发负责人芮正圭表示:“这是Nexon游戏角色聚在一起,一起沟通的空间,同时也是Nexon游戏各种功能联动的综合性服务平台。”

对于诸多游戏、技术公司入局的3D虚拟社交品类,虚拟形象、社交场景、社交体验是不可或缺的要素。其中,虚拟形象和场景可以借助现有的游戏IP、数字资产等资源快速创建,如何为用户提供独特、高质量的社交体验则成为现阶段3D虚拟社交产品的关键竞争力之一。

RTC(Real-Time Communication,实时通信)技术作为在直播、在线会议、在线教育等B端场景中大量应用并持续迭代的音视频传输技术,也正在成为有多人在线、实时社交需求的3D虚拟社交产品的技术选择。



  

RTC技术:多种通信技术的复合领域,各家根据资源和业务场景构建解决方案

RTC技术是包含了网络传输、全局调度、媒体处理算法、媒体编解码等诸多相关技术的复杂技术领域,它的发展伴随着互联网的进程,已经历了多代技术架构的演化。2020年全球疫情以来,远程办公、在线协作和在线教育等领域的需求激增,也加速了RTC技术解决方案的发展以及在各行业的应用落地。

现阶段RTC技术架构依赖于大规模的云计算和边缘计算节点资源,因此主流参与者为互联网大厂和有一定基础的RTC PaaS厂商。国内的RTC技术厂商主要有阿里云、腾讯云、华为云、声网Agora、网易云信等。

当前RTC技术架构并没有统一的标准和做法,各家技术厂商根据自身资源和业务特点构建系统和解决方案。

其中,阿里云构建了全球实时传输网络GRTN,并基于GRTN推出了云处理+端渲染架构的RTC“零处理”解决方案。这套“零处理”解决方案旨在突破端侧能力限制,端侧只需进行视频采集和传输,视频传输到云端后就可以利用云端的实时处理引擎和庞大算力进行处理,处理好的视频再被回传到端侧呈现,从而实现终端体验的一致性。

为多人在线语音社交软件Clubhouse提供RTC技术的声网Agora提出了“RTE(Real-Time Engagement)”概念,相比于RTC更聚焦于用户所需的共享时空,即场景。声网采用基于SDN架构的SD-RTN技术,构建了全球实时通信网络,利用边缘节点和智能路由加速技术,能够做到全球端到端延迟控制在400ms以内。

此次Nexon选择合作的TRTC(Tencent Real-Time Communication,腾讯实时音视频)技术是由腾讯的音视频团队经过22年技术积累开发出来,以PaaS产品的形式开放出来的RTC云服务,专长于为各种即时通信提供技术和服务,包括多人音视频通话和会议,屏幕实时分享,音视频实时直播等。


目前,由TRTC技术所支撑的腾讯产品有腾讯会议、企业微信群直播和腾讯课堂等。疫情以来各类远程/在线交互需求猛增,使用腾讯会议等产品的人数也随之增加。

TRTC是一个音视频通讯的云服务,TRTC的SDK则是用户使用它的桥梁。用户可以仅仅通过SDK和应用之间的交互,就能实现音视频实时通讯。

在服务器端,当用户在应用1与应用2的用户进行视频通话时,应用1的SDK和应用2的SDK会先与TRTC云服务进行通讯,由TRTC云服务对双方的音视频数据进行处理和传输。

在播放器端,为了抵抗网络抖动,TRTC会设置一个叫做Jitter Buffer的区域,对数据流起到缓冲作用,再将视频帧交给解码器解码。这样做相对于用一、两秒的延时,换来了实时视频的观感的流畅性。

此外,TRTC使用NACK的方式进行UDP传输,还会应用FEC技术来优化网络抗性。

多重技术的综合运用之下,运用TRTC技术的平台可以使得实测抗丢包率超过80%、抗网络抖动超过1000ms,在弱网环境下,仍然能够提供高质量的音视频通信。


      

腾讯TRTC与游戏和元宇宙相关领域结合:云游戏、开发工具、提供音视频解决方案

在本次与Nexon合作前,腾讯的TRTC技术已经在游戏和元宇宙相关领域有过不少结合案例。

TRTC为云游戏提供PaaS服务,可以在短时间内将游戏云化,并满足云游戏在超低延时、超大码率、多终端支持等方面的技术要求。

在游戏开发方面,腾讯还开发了 TRTC Unity SDK,帮助游戏开发者快速实现在游戏中的音视频通话。Unity是目前市面上最主流的游戏开发引擎。目前,手游玩家越来越多,开发者意识到,在游戏中集成实时音视频功能可以快速拉近玩家之间的距离,增强游戏体验感,使大家越来越依赖实时互动功能。

除Nexon外,TRTC近期在元宇宙领域也与其他产品展开了合作。

2022年12月,腾讯云宣布支持“Metalife”,让用户能够通过其 TRTC 技术在沉浸式虚拟环境中进行连接。

Metalife是一款来自日本的虚拟通信产品,可以用作元宇宙办公室、在线活动场所、学校教室等,产品发布三周后就突破了两万的用户总量。Metalife采用了TRTC以及音视频解决方案等腾讯云媒体服务。

Metalife的首席执行官Kiyoshi Kondo表示:“……Metalife 很高兴从中受益,借助腾讯云高性价比、高兼容性、高性能的TRTC SDK,让我们的用户能在虚拟世界中更流畅地交流,更真实地互动。”




结 语

RTC技术此前更多在各种B端场景中发展迭代,各自发展出了针对不同场景的解决方案,以应对诸如金融面签场景的可连接性、在线教育场景的多并发等不同需求。

在多样化的B端场景中发展出来的RTC技术,现阶段正在向3D虚拟社交、元宇宙等领域迁移,为3D虚拟社交产品中关键的社交体验提供技术支持。在能够支持大量用户同时在线、稳定、高质量的音视频交互的基础上,3D虚拟社交产品才有条件探索虚拟空间中的独特社交方式,为用户提供新颖的社交体验。


上一期「游戏日」


Hello!
我们在为更加闭环、更加高效的服务模式做准备
欢迎加入限定白名单
与我们一起探索










您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存