36氪获悉,XR创作技术企业深锶科技(北京)有限公司(以下简称“深锶科技”)宣布完成连续三轮总额超千万美元融资,其中天使轮由源合资本投资,金沙江联合投资了Pre-A轮,SIG投资了Pre-A+轮。据悉,资金将主要用于加强云渲染等方面技术研发。

深锶科技打造了自己的虚拟人IP安若菡

深锶科技以自研XR引擎为基座,面向电商、直播、XR演唱会、商业发布会、社交媒体传播、虚拟人助理和客服等多应用场景提供SaaS化虚拟制片服务。将实时3D互动内容制作能力像Canva或Figma一样,以更低的门槛提供给B端客户。

事实上无论是国内,还是在全球范围,将3D互动内容制作SaaS化的公司还比较少。因为3D互动引擎是建立在复杂工具链的基础上,传统而言主要为游戏公司、及更高端的电影产业提供服务。而再叠加实时计算功能,则在云计算、边缘计算、人工智能算法等方面提出了更高的要求。

SaaS化提供XR制作能力的深锶科技核心团队,是在这一前沿领域国内不多见的既有专业深度,又具备技术广度的创业团队。创始团队主要由前视频、影视行业资深专家组成,与好莱坞The Third Floor、Pixar等顶尖机器视觉团队进行过长期深度的合作及研讨,成员包括前阿里、腾讯、百度高管及中科院前沿领域研究人员。

深锶科技联合创始人兼COO安承海向36氪表示:”在过去半年中,我们花了很多精力在做好一件事情,就是XR引擎的产品与市场相契合(PMF)验证。目前已经在国内顶尖电商、演唱会、虚拟人运营等领域有合作案例。“

其中虚拟人是XR创作工具最主要的应用方向之一。近年来,特别是从2021年元宇宙概念大火开始,虚拟人正在为大众所接受,也正在从遥不可及的高科技结晶,转变成虚拟艺人、虚拟主播、数字员工等生产力工具。

但是在目前的技术体系中,不同类型的虚拟人,比如高清数字人,通常需要一定规模的动画视频制作团队来支持,也无法做到实时互动,其实无异于一个动画角色;虚拟偶像,则需要投入动辄百万起步的专业动捕设备、表情捕捉设备、以及技术团队,系统联调需要以小时计的启动时间。

一方面是需求的快速增长,另一方面则是高昂的制作成本,以及低效的制作流程正在成为商业模式走向成熟的桎梏。而已经在虚拟人领域实现商业落地的深锶XR引擎,打通了虚拟和现实之间的数字通路,能够在保持高度真实感的基础上,实现实时统一的表情、动作捕捉,超低延时传输和实时云渲染。

越是看似简单操作,背后越是需要更加艰深的技术来推动,深锶科技联合创始人兼CTO徐昊向36氪介绍:“可以实时互动的4K高清照片级真实感的虚拟数字人,表情和动作非常微妙,特别是当他动起来还要显得真实的话,背后有非常大量的图形渲染、几何处理和物理模拟的工作。之前为什么大家一直都没有做得很好,是因为涉及的算法逻辑太复杂,或者说计算量太大。在过去的2021年里,深锶科技投入了大量的时间和精力,从技术底层及核心算法上逐层突破,仅一年内,已经在人体的三维重建、真实感图形渲染和云原生SaaS服务等多个关键技术领域取得重大进展。”

具体来说,深锶科技通过构建多视角人体标准数据集,用以训练和测试神经网络算法,进而仅用一个普通单目摄像头即实现了实时全身动作捕捉,能够同时对身体姿态、面捕表情进行实时捕捉,还可以高精度还原手部细节;并且在常规基于视觉的动作捕捉方案不太擅长的半身遮挡场景下,也有很好的表现,这也是Meta的Horizon全家桶一直被外界诟病的地方。

基于自身的SaaS平台,深锶也打造了自己的虚拟人IP安若菡,据深锶团队介绍,安若菡集合了深锶1年多以来的技术探索成果,完全按照电影工业级标准打造;在B站的冷启动试播阶段,就凭借其高度接近真人的展示效果给观众留下了深刻印象,并在网络上引起了话题讨论。

金沙江联合资本合伙人尹德纲表示:“投资深锶科技以来,我们始终与团队保持着密切的沟通交流,深锶科技在产品和业务两端均保持了高质量的快速增长,其超高质量的数字人及其他3D实时互动内容获得了客户一致认可;深锶团队富有创业精神与热情,对产品方向与市场趋势具有极强的洞察能力,能够领先于行业找到需求的爆点并提前布局形成标准化产品,金沙江联合很高兴能够在企业创业的初期开始就与团队同行。”

“中国的企业客户在掀起向XR迁移的浪潮,在这个大背景下,SIG很高兴能够支持深锶科技。深锶科技是我们看到行业内少有的既具有非常丰富的行业经验与资源,又有极强技术与产品化能力的顶尖团队。深锶科技显著降低了未来每一个用户使用高质量3D互动内容的门槛,将有机会成为XR时代必不可少的基础设施。” SIG海纳亚洲创投基金合伙人郭路说到。

当前,整个互联网行业寄希望于通过第四次工业革命,实现全真互联、万物互联、数字智能、混合现实等诸多领域的数字化、智能化突破。元宇宙、Web3等概念和提法也应运而生,Metaverse或将成为助推第四次工业个革命的全面启动,并且在整体转型的过程中,从学术、知识、技术、工艺、生产制造、到日常生活,形成全方位的迭代升级。

在2021年,Meta的VR设备Oculus Quest 2全球销量已超千万,在XR硬件市场进一步爆发之后,社交、游戏、消费等巨大的C端应用场景也必将被引爆,届时海量原生3D内容、以及实时3D交互的需求势必会成为市场的焦点。

推荐内容