文:物联网智库
《头号玩家》让我们看到一个虚拟现实结合世界,无论是视觉还是触觉体验,VR技术已经能处理的相当细腻,而这种沉浸式体验已经不再遥远。如今,云游戏引领的新一轮变革悄然而至,5G技术凭借超大带宽、超低时延、超高可靠性的特性,正在促进云游戏新一轮爆发。
当云游戏遇上5G,游戏玩家能够摆脱智能终端硬件的束缚,畅享云端算力的魅力;拒绝终端与内存焦虑,随时随地畅玩;告别让人出戏的卡顿,体验精致逼真的游戏内容……同时,与游戏产业链相近的短视频直播、社交媒体、影视等更多行业也将大放异彩,创新出基于“云+5G”的虚拟人直播、智能客服等丰富应用。
电影《头号玩家》
满眼生机转化钧,天工人巧日争新。在图形计算领域具有核心优势的云计算服务提供商海马云(天津)信息技术有限公司(以下简称“海马云”)看准云游戏赛道未来的无限潜力,专注于成为国内领先的云游戏计算服务和解决方案提供商,推出“基于云端实时渲染的数字分身”解决方案,驱动云游戏及其他行业日渐争新。
遇见虚实结合的新世界
根据Newzoo《全球云游戏市场报告》预测,2020-2023年,云游戏的全球市场规模将增长7.2倍,达到51.35亿美元。而中国云游戏市场收入的复合年均增长率将达到135%,市场增速将显著高于全球平均增速101%,成为全球最具潜力的云游戏先行者之一。
成立于2016年的海马云目前主要面向云游戏B端市场,已在国内投资建成了最大的云游戏计算服务平台,在全国部署超过30个分布式计算节点,接入客户超过百余家,月服务用户超过3000万人,服务器规模及服务用户数量均为国内第一,客户覆盖头部互联网企业、终端硬件厂商、游戏开发商以及游戏平台商合作伙伴。
近期,海马云为北京超维视界研发的首款数字人工智人Lucy,提供基于云端的实时渲染解决方案,Lucy是国内首个基于移动云端实时渲染的高清数字人工智人。所谓“基于云端实时渲染的数字分身”解决方案,即打破本地设备的限制,以更多元且便捷的方式链接虚拟与现实,通过其自主研发的高性能高密度ARM SOC阵列服务器和容器的安卓实例化技术,实现算力弹性分割复用,自研分布式容器管理平台提供百万级别的容器管理能力,深度优化的实时互动流媒体能力,能够有效降低时延,提升弱网表现。
国内首个基于移动云端实时渲染的高清数字人工智人Lucy
海马云“基于云端实时渲染的数字分身”解决方案依托于高通骁龙845移动处理平台的AI运算性能,基于其CPU架构打造的海马云第三代服务器。近期,海马云还将推出新一代服务器,搭载新一代高通骁龙865平台,集成第五代Qualcomm AI Engine,可实现高达每秒15万亿次运算,AI性能比前代提升2倍,更强大性能助力云游戏场景下高精度、实时渲染的能力,在云游戏领域可以打通设备层-通信层-平台层-内容服务层各个环节,为设备前端的用户提供“真实、智能互动、沉浸式”的画面体验。
“基于云端实时渲染的数字分身”解决方案不仅适用于云游戏领域,还能拓展到智能客服、视频直播、虚拟形象视频对话等各类AI互动场景中。
AI+5G催生云游戏蜕变
在云游戏领域,基于GPU的渲染是整个云游戏计算解决方案的核心。游戏中NPC形象的优劣会直接影响到玩家的游戏体验,虚拟人是否真实灵动,场景渲染是否写实,道具功能是否实时……都是检验一款游戏(尤其是剧情类游戏)是否具有吸引力的硬性指标。
而数字场景中渲染级别分多种,既包括二次元级别的低精度渲染,也包括高清电影特效中的高精度渲染。渲染精度的高低与算力直接相关,同时也跟渲染时间有关。特别是实时互动性产品,就必须要考虑渲染精度和渲染时间之间的平衡。
海马云第三代服务器
海马云产品副总裁赵珅表示,“我们在做整个计算架构设计时发现,并发密度对于整个算力的性能和成本是一个非常重要的因素,因为必须要有足够高的并发力度,才能提供足够强大的算力,同时对功耗也有要求。最后我们发现高通的IoT解决方案在整个算力、单核GPU能力、功耗以及支持的空载技术方面是最好的。我们业务能够在云游戏领域做到国内业务规模最大,高通芯片的优势保证了我们在很多场合的竞争力。”
另外,5G超大带宽和超低时延是解决云游戏体验与传输问题的关键。一方面,5G技术本身的空口稳定性和传输时延保证能提供整体网络的一致性体验;另一方面,5G切片和5G边缘计算网络避开了核心网这种复杂的路由环境,使得用户可以连接到边缘节点,用最短的路径保障最低的时延。
5G赋能云游戏升级
赵珅认为,5G高速率和低时延的信息传输特点,有助于3D内容制作的云-端协同渲染成为新的主流,打通终端到边缘计算再到云计算的多平台协同计算;此外,5G 带来的终端革命,将第一次给消费者带来空间维度的交互模式升级。以前,用户与手机的交互均为二维操作,而基于 5G ,用手柄和朋友在虚拟世界玩游戏、打招呼,均为三维互动。
目前,海马云第三代服务器依托于高通845移动处理平台,并将在今年第二季度开始部署基于高通新一代集成5G技术的高通骁龙865移动处理平台。在整机服务器对比上,第四代服务器也将搭载Android 10,实例网速较上一代从1Gbps提升到了2.5Gbps。
5G“云端渲染”创造新价值
毫无疑问,5G会为云游戏带来一场颠覆性的变革,同时也会引发全新的商业模式。基于云端渲染的数字分身就是典型的例子,借助5G超低时延和超大带宽的能力与高性能服务器算力,带来了三大全新价值。
云游戏
首先,5G超大带宽、超低时延传输能力解决了云端算力下发与本地计算力不足的问题,游戏玩家只需要保持良好的网络环境,配备基本具备编解码和显示的终端设备,就能享受到极高配置主机级别游戏的体验。
其次,5G对于消费端成本控制和产业链的降本增效也起到积极作用,游戏玩家不用花费高昂的成本购置高性能的终端硬件;对于影视、视频直播等行业而言,以往渲染成本极高、商业化进程慢的情况也将迈入拐点。例如,影视行业原本渲染一帧需要48小时左右,同时渲染期间电脑无法进行其他操作,造成金钱和人力成本的浪费,如今借助云计算和5G网络就可以轻松解决这些问题。
最后,5G助力创新并拓展了应用场景,除云游戏之外,与之相关的视频领域及其他交互场景都将实现变革,比如智能客服、视频直播和演艺、影视特效高精度实时渲染等等。
未来,海马云将进一步在云游戏赛道扎根,填补羽翼尚未丰满的云游戏业务;同时也将持续探索海外市场,面向产业端和消费端协同发力。高通5G+ AIoT技术凭借全球部署以及人工智能算力优势,将继续为海马云一路保驾护航。
5G改变社会,消费端一定是最重要的应用场景,其中历经变革的游戏行业是商业模式和应用创新最显著的领域之一,也将是率先寻求变革的领域。未来,随着游戏架构的调整和升级,我们或许还能看到更沉浸、更易交互、更科幻的场景。
好文章,需要你的鼓励
这项研究利用大语言模型解决科学新颖性检测难题,南洋理工大学团队创新性地构建了闭合领域数据集并提出知识蒸馏框架,训练轻量级检索器捕捉想法层面相似性而非表面文本相似性。实验表明,该方法在市场营销和NLP领域显著优于现有技术,为加速科学创新提供了有力工具。
un?CLIP是一项创新研究,通过巧妙反转unCLIP生成模型来增强CLIP的视觉细节捕捉能力。中国科学院研究团队发现,虽然CLIP在全局图像理解方面表现出色,但在捕捉细节时存在不足。他们的方法利用unCLIP生成模型的视觉细节表示能力,同时保持与CLIP原始文本编码器的语义对齐。实验结果表明,un?CLIP在MMVP-VLM基准、开放词汇语义分割和视觉中心的多模态任务上显著优于原始CLIP和现有改进方法,为视觉-语言模型的发展提供了新思路。
这项研究介绍了RPEval,一个专为评估大语言模型角色扮演能力而设计的新基准。研究团队从法国里尔大学开发的这一工具专注于四个关键维度:情感理解、决策制定、道德对齐和角色一致性,通过单轮交互实现全自动评估。研究结果显示Gemini-1.5-Pro在总体表现上领先,而GPT-4o虽在决策方面表现出色,但在角色一致性上存在明显不足。这一基准为研究人员提供了一个可靠、可重复的方法来评估和改进大语言模型的角色扮演能力。
这篇论文介绍了LegalSearchLM,一种创新的法律案例检索方法,将检索任务重新定义为法律要素生成。研究团队构建了LEGAR BENCH数据集,涵盖411种犯罪类型和120万案例,并开发了能直接生成关键法律要素的检索模型。实验表明,该模型在准确率上超越传统方法6-20%,且在未见犯罪类型上展现出强大泛化能力。这一突破为法律专业人士提供了更高效、精准的案例检索工具。