与星瞳一起跳舞!腾讯先锋探索虚实互动新玩法
11月3日-11月5日期间,时尚虚拟偶像、QQ炫舞系列虚拟代言人星瞳在杭州竞鹅酒店(腾讯电竞联名店)举办线下生日活动。期间腾讯先锋与星瞳IP、竞鹅酒店展开技术合作,共同解锁沉浸感十足的“AI虚实互动体验”,邀请线下观众与星瞳在虚拟场景中实时“斗舞”。这也是腾讯先锋基于其虚实互动技术打造的“云渲染+虚实互动”新玩法的线下首发落地。
未来,腾讯先锋虚实互动技术还将通过TV客户端触达更广泛的用户,带来更具趣味性、专业性的大屏健身交互体验。
打破虚实界限,邀你与星瞳共舞
从2018年首次亮相,到与国乐大师方锦龙先生同台表演,再到参与国产原创动漫形象舞台竞演节目《2060》,虚拟人星瞳从虚拟世界走来,以愈发鲜活的形象与现实世界产生互动。
而竞鹅酒店是腾讯电竞与欧愉科技共同打造的电竞酒店品牌,酒店拥有浓厚的虚拟人及虚实互动氛围,拥有国内首个电竞虚拟主理人V姐全方位服务、电竞主题数字互动体验、正版电竞IP主题房等一系列电竞数字IP体验空间。这次生日活动就落地在竞鹅酒店,借助腾讯先锋自研的虚实互动技术,观众首次以“真实形象”进入星瞳的世界,与她共舞一曲。
在互动环节,参与体验的观众只需站在互动区域,其真人形象就能够通过手机摄像头投射在虚拟场景中,其在现实世界中的一举一动也会实时同步至屏幕中,舞蹈挑战开始后,系统通过判断观众的骨骼姿势进行打分评级。
简单易上手且自由度极高的操作,极具沉浸感、趣味性的交互玩法让观众直呼过瘾,同时无需穿戴设备和绿幕背景,仅通过普通手机摄像头就能在虚拟世界实时互动的低门槛体验,也让观众对这一技术走进自家客厅充满了期待。为了打造优质的AI虚实互动体验,腾讯先锋在其自研虚实互动技术里综合应用了诸多技术能力,包括实时无绿幕抠图、姿态估计与动作捕捉、实时云端视频流媒体AI通用处理架构。
其中,实时无绿幕抠图技术,绕过了设备的限制,能够在云端进行实时4K视频发丝级抠图。换句话说,无需绿幕或设备算力,只需普通的手机摄像头,也能在虚拟世界中实时呈现高质量的真实人物形象,并且帧率可达60FPS,足以满足普通用户在虚拟场景实时互动的需求。
而在姿态估计与动作捕捉方面取得的技术突破,则进一步降低了AI虚实互动体验的门槛。不仅摆脱了对特殊场地和拍摄设备的依赖,也无需额外的可穿戴设备,仅通过手机或是普通的RGB摄像头,即可实现包括身体、手部和表情在内的高精度动作捕捉以及虚拟形象表演驱动。结合深度神经网络的视觉AI动捕技术和端云协同的多视角拍摄与计算能力,能够进一步提高精度及稳定性,精准还原肢体律动。同样,该技术也是完全基于云端计算,无需额外算力。
上述两大技术能力都对“云”提出了极高的要求,面对随之而来的延时、画质、跨终端等实际问题。腾讯先锋打造了实时云端视频流媒体AI通用处理架构,整合硬件编解码和高效神经网络推理框架,构建了完整的视频流媒体处理与云端低延迟AI计算方案,并且支持先锋云游戏kunpeng、ampere、x86+nvidia gpu等多种平台, 适配不同gpu集群部署,支持边缘节点部署调度。 在腾讯先锋云游戏云计算能力的加持下,“云渲染+虚实互动”玩法的链路延迟基本可稳定在100毫秒以下,并且可实现单机64路视频流的实时动作捕捉,使得用户随时随地在虚拟世界进行交互成为可能。
多场景创新融合,探索云游戏技术的无限可能
多年来,腾讯先锋在云游戏领域进行了深入的探索,在关键技术、应用场景、内容生态等方面积累了丰硕的成果,并持续丰富用户的娱乐互动体验,不断拓宽云游戏的可能性。
云游戏的愿景之一就是降低设备门槛,打破不同设备间的隔阂,让用户随时随地获得极致的体验。在服务玩家的过程中,腾讯先锋持续发力无缝跨场景连接,围绕缩短内容到用户的“距离”,进行了全方位的优化,跨端解决方案日趋完善:支持手Q、微信登录一键授权,打通移动、PC、TV大屏等多终端的游戏体验,是国内少有的全终端云游戏生态平台。同时通过定制化游娱套装, 腾讯先锋解决了移动游戏在大屏端的交互问题,让用户体验更加“丝滑”,促进多用户场景的渗透。
基于多年来沉淀的云游戏技术能力,腾讯先锋也在不断拓展技术的边界,寻求新的突破。此前,腾讯先锋参与了“云游长城”项目中“数字长城”的制作,为其提供云游戏技术支持,帮助数以亿计的数字资产成功“上云”,并通过独有的云游戏传输流控算法在移动端打造3A级的观看效果和交互体验。这也是全球首次将云游戏技术应用于人类文化遗产保护。
今年9月,高新视频互动场景创新国家广播电视总局实验室正式启动,在上海市广播电视局的指导下,腾讯先锋将联合行业共建单位聚焦高新视频云互动数字场景创新应用开展相关研究,为丰富高新视频内容供给、培育智慧广电新视听提供重要支撑。
腾讯先锋还在积极拓展云互动与社交、演艺、文创、运动等领域的创新融合,打造低门槛的虚实互动体验。此次与星瞳IP的技术合作,为大众打开了近距离接触云游戏技术的新窗口,以极致的用户体验又一次刷新了外界对于这一技术的认知与想象空间。
未来,云游戏技术将被应用于更多数字场景之中。借助云游戏技术,用户可以与数字人、KOL等同场景实时互动,或是与身处不同空间的用户同屏互动,抑或是丰富XR领域的内容生态,提升可玩性,解锁更多创新玩法。
可以预见,在云游戏技术的底盘之上,不仅可以诞生各种各样的游戏服务,持续提升用户娱乐体验,也可以与更多非游戏行业创新结合,以丰富的形态渗透进大众生活,带来全新的数字体验,释放无限可能。
《元梦之星》:开启全新社交游戏体验在当今游戏市场中,一款名为《元梦之星》的游戏正在迅速崛起。并以其独特的社交互动和创意玩法吸引了大量玩家。这款游戏由腾讯公司精心打造,旨在为玩家提供...
腾讯网易攻防互换,结果要在抖音上“白刃相见”“当初天美做《星之破晓》找我提建议,我还是腾讯系游戏垂直主播,这次《元梦之星》请了这么多UP主,连跳宅舞、搞美妆的都有人找,结果都没有人...
从不同角度审视Geistfrei GmbH,它的魅力无法用语言完全描述。她就像一部引人入胜的互动剧本,带领玩家们穿越虚实之间,犹如电影主角,跨越场景、解决难题,体验别样的游戏世界。...
6月12日,《星空(Starfield)》发布了最新预告片和实机演示,整个游戏行业闻之沸腾。1000颗风格各异的星球,有开发者精心设计的场景和任务,也有大量随机生成的可探索内容。尽...
玄舞是一款很流行的电子舞布,在这款电子舞布中,你要做的就是跟随着电子舞布的节拍而跳。在里面,玩家们能够互相切磋,也能够加入舞蹈团体。对于初学者来说,这篇文章会给你几个有益的建议。在...
《魔兽世界》官推在12月23日分享一段小视频,展示梦爪类战斗小宠的隐藏属性:一起快乐地跳舞。据悉,召唤梦爪之后,对它使用/dance表情,小梦爪就会跟你一起跳舞。视频中,德鲁伊主人...
Exoprimal:与恐龙共舞的多人游戏,探索外星套装的无限可能在多人游戏的领域,有一种普遍的观念,那就是第一印象至关重要。许多游戏开发商都会在游戏发布前大肆宣传,吸引玩家的注意力...
10后在闲鱼分享小马宝莉IP卡,00后饭圈流行明星小卡,90后为“补票童年”收集宝可梦卡……一张巴掌大的四方卡牌,让几代人都为之着迷。近两年,卡牌成为年轻群体的社交“硬通货”。其中...
哈喽!大家好,经典网络游戏大话西游2的小编又给大家带来了最新游戏资讯。感兴趣的玩家朋友们就跟随小编的镜头一起往下看吧~标题内容在文章末尾!为什么心猿最近涨价那么猛,不可靠消息说是因...
各位老铁,经常在投稿老铁这里看到一些奇奇怪怪的重点。比如今天给大家介绍的这位老玩家,本意是想用自己攒的60个绑定棉布秘银材料拼一波八星。谁知道八星没出,但是面板却意外出圈,吸引了一...
今年2月份,Steam上线了一款免费的新国风国产游戏——《剑气劫》。笔者近期体验了这款游戏,这里来分享一下个人的一个游玩体验与心得。剑气劫大体上有两种玩法,一个就是传统的PVE模式...
作者:诸神不是万能的 【改版前后属性对比】【强度对比】技能数据,我这上面是直接引用了强的不是人老师的数据整体搭配计算,按照毕业tp出血流为模板,计算提升约为4%,时间打的越长,提升...
杀手47算得上玩家的一位老熟人,毕竟只要游戏里出现光头角色,大概率就会有人高呼“是你吗47”。光头梗的传播史清晰明了,早年活跃在鬼畜界的葛平老师,靠着“吴克小朋友”和“人群中钻出一...
这个赛季的中路法师依旧没有特别好的表现机会,但是随着版本的更新,有些法师还是脱颖而出。不过我们也不难发现,目前法师的定位更加偏向于控制。输出则排在第二位,而且大部分的法师装备也都由...
我乃佐竹义重,关东常陆国佐竹氏第二十代家督,外号:“关东之鬼”。要说谋略和战绩,我可谓智勇双全、政战咸熟。元服前便名震常陆,能力不逊于北条伊达之流。然而在他国异乡,我的名字,却鲜有...
热血传奇百区是目前最贴近当年176版本的复古服务器,虽然因为合区时加入了一些魔龙版本的元素。但是老道觉得这种结合还是蛮不错的,尤其是腰带靴子的存在让整个装备穿搭界面看着合理。毕竟魔...
《哈迪斯2》上线后吸引了大量玩家,同时也带动了前作《哈迪斯》的在线人数。根据目前的SteamDB数据,最新记录显示。《哈迪斯》在Steam上的同时在线玩家已经达到54240人,打破...
小编推荐