股吧交流

新闻 公告 提示 股吧

新题材——央视数字人分身——开启通往“数字永生”的大门

用户:用户:给逗gobar1 时间:02月23日 17:26

舞台上的刘浩存,其实是“数字分身”

《梦底》这个节目,舞台上同时出现好几个刘浩存。你以为是全息投影?又错了!除了一个是真人,其他的全是“数字分身”。这背后是由火山引擎的空间视频技术打造的数字分身。采用空间视频(Spatial Video)+ 4DGS(4D Gaussian Splatting,4D高斯泼溅)完成,而并非提前拍好的“复制粘贴”。

实现方式更接近影视级数字人生产。演员进入环形采集棚,约70 台工业级高分辨率相机阵列,360 度无死角拍摄,多视角数据上传云端,通过4DGS算法直接重建为4D数字资产,再在游戏引擎中实时渲染。

相比传统3D建模,整个过程不需要手工建模与贴图,直接保留真实皮肤与表情。但最让我震惊的还是“光影交互”:也就是当舞台上的灯光扫过的时候,那些“假”刘浩存身上的影子,是实时变化的!

这背后其实是一套虚实信号转译系统。现场灯光控台发出的 DMX 信号(舞台灯光控制协议),被实时转译给了渲染引擎(Unreal Engine)。现实灯亮,虚拟灯也亮。


当然,要做到这种极致效果,光靠传统图形学还不够,豆包大模型还解决了两个地狱级难题:

第一是“多人同台的算力爆炸”问题。十几个人同台,显卡要冒烟怎么办?Seed 3D 模型给每个演员生成了一个简化的“几何外壳”,只算外壳的影子,算力暴跌,效率暴涨。

第二是“近景特写的假脸”问题。怼脸镜头容易穿帮怎么办?DA3(Depth Anything v3)模型进场,精准推断深度信息,给光影计算提供了完美的“导航图”,皮肤质感细腻到根本看不出是生成的。

这就是 AI 加持下的 4D 重建,硬生生把虚拟做成了现实!

许多AI公司也在发力“数字分身”:当大多数的 AI 厂商都在忙着打造更多 AI 工具的时候,一家以制作 AI 视频著称的公司居然开始制作「第二个你」了。近日,Pika 推出 AI Selves 产品,宣称可以生成「AI 版的你」。

注:此文仅代表作者观点

暂无评论内容