2023东方卫视跨年晚会上，虚拟人“东方嫒”就像一束耀眼的光，首次闪亮登场。她不仅担任了晚会的主持人，还与艺人程潇在奇幻梦境一般的舞台上，表演了歌舞《我曾遇到一束光》。随着歌声，“东方嫒”时而吹长笛伴奏，时而与程潇共同起舞，这种打破次元壁的表演为观众解锁了全新感官体验。而生产制作中心制作部和后期部此次全程参与了“东方嫒”是人物设计、首秀节目的前期策划拍摄和后期合成工作。联合SMT旗下子午工作室团队用了2个月的时间，经过概念创意、原画设计、3D建模、动作捕捉、声光渲染等一个个流程，完成了“东方嫒”人物资产的打造，在不到1个月的时间内完成了跨年首秀节目的制作。
遇见光·“东方嫒”的诞生
“东方嫒”是SMG布局元宇宙，东方卫视集核心优势所打造的超写实数字虚拟人。其名字中的“嫒”取自“令嫒”，有三层含义：一是有东方女儿的意思；二是音同“AI”，象征着元宇宙的崛起，寄托着SMG人对智能化、数字化融合转型的决心；三是“东方嫒”寓意“爱东方”，名字既朗朗上口又大气有爱。
作为东方卫视首次推出的超写实数字虚拟人形象，“东方嫒”从3D建模、 动作捕捉到声光渲染，都是当今市场上展现的数字虚拟人中的佼佼者，8k超高清皮肤纹理贴图，结合8k置换贴图displacement map人物皮肤毛发更是达到影视级别。“东方嫒”从出生起就汇聚了无数人的心血，为了长相甜美亲和，特意选择了有点婴儿肥的少女感形象，显得更有观众缘；为了服装独一无二，特意安排了一个专门的团队负责她的造型设计，包括首饰、头饰、服装均为原创，设计师在三维软件中反复调试，力求做得和设计原稿相近，同时与服装师沟通，细致研究服装材质，最终呈现出完美的逼真效果。
追逐光·科技赋能元宇宙
“东方嫒”的首秀节目《我曾遇到一束光》，首次创新实现了真人、数字人 在 XR 技术中的融合应用，将跨次元同台的时空感、光影感、联动感演绎地丝滑 唯美。不过，在节目中制作超写实虚拟人是件极具挑战的工作，周期短是避不开的难题，使得任务变得难上加难，比如XR棚拍摄时间只 有两天，但为了保质保量地完成任务，生产制作中心制作部克服困难，在第一天就完成了所有XR系统测试、资产调整、拍摄脚本预录、人物布光调试等流程；在第二天的4个小时内完成了所有真实人物和虚拟人物的镜头拍摄。然而，虚实双生的效果对于灯光舞台、镜头画面、演员走位及后期合成等要求极高，所以制作部和后期部强强联手、通力合作，使得表演置身于一个美轮美奂的舞台之中。
在置景方面，制作部使用单面的LED弧形屏和地屏相结合，灯光全部使用影视化的布光手法，使人物光线更柔和。同时，还设计了类似于水波纹的布光细节，在摄影棚顶部架设了一个水槽，灯光通过水面的折射会产生波纹效果，让人物能更自然地融入到缤纷的水底世界里。
在设备方面，制作部选择SONY 4K 3500多机位讯道系统，可以有效避免LED屏出现摩尔纹，同时，摄像机和所有镜头的型号都提早给到后期部做参数读取和匹配，因为在XR拍摄中，景别、景深、光圈等需要严格把控，不可随意变动。另外，还使用了台虚拟机位（摇臂、轨道），在当前的XR拍摄中，现场只能有一台摄像机具备追踪合成效果，而待命机位无合成效果预览(当前系统版本)，也就是说2台摄像机无法同时进行拍摄，这更偏向于电影制作（虚拟制片）的手法，因此对前期的脚本和策划需要相当严谨和细致。为此，制作部提前和导演组确认了场景（资产）和分镜头（故事板），制定出详细的拍摄方案，比如哪些镜头是要需要拓展场景等。
在拍摄方面，最大的难点就是如何把虚拟人“东方嫒”放到虚实交相辉映的 舞台中。由于在现场监视器里是看不到虚拟人的，所以只能靠多角度拍摄和精准走位来确保虚拟人的表演与艺人的互动毫无违和感。因此，在前期策划时，制作部和后期部就这一拍摄难点进行了细致的探讨，制定了详细的方案，最终在现场拍摄时，顺利地完成了这一组虚实结合的镜头。
在后期方面，由于超写实虚拟人贵在“真实”，这“真实”是拉近观众与虚 拟人之间的距离，是消除违和感的重要核心。“真实”不单单是外貌形象，更应在行为表现上，所以“东方嫒”的每一次微笑，每一个动作，后期制作人员都会倾尽所能，力求做到极致，比如节目中有一段“东方嫒”的长笛独奏，她的手指动作以及脸部吹吸，都是按照真实演出来精雕细琢，甚至可以下载视频作为指法教程来学习演奏。
“东方嫒”的后期制作与以往节目制作大相径庭。一是耗时长，每次调整都 无法在短时间内看到效果，必须在完成一系列流程后才能看到，所以如果未达到预期效果，就需要重新走一遍流程。二是难度大，整个制作流程很难逆向调整， 模型确定后进行骨骼绑定，绑定后一旦要调整，又要重新绑定，所以在模型确定前就要想好所需效果。同时，画面的最终呈现离不开背后一帧一帧的渲染，后期部用的是renderbus云渲染，而年底又是云渲染任务最多的时刻，即使是VVIP也有用不到资源的时候，这无形中又拉长了制作时间。在这么多不利的条件下，为了确保节目安全播出，后期部的每一位制作人员废寝忘食、精益求精地赶工，最终把电影中才能看到的技术细节搬上了荧屏，一虚一实的艺术形式，提升了舞台表现力。
成为光·开启崭新“视”界
正是在生产制作中心团队和SMT子午工作室的默契合作下，运用UE5引擎结合XR实时成像技术，让“东方嫒”在首秀节目《我曾遇到一束光》中穿梭于奇妙的幻象世界里，搭配悠扬的笛声，上演纯洁的舞蹈，沉浸式带领观众感受人与自然的和谐共生，为视听体验带来更多的可能性。
此次生产制作中心在疫情高发期，克服诸多技术问题，圆满地完成了任务，不仅更娴熟地掌握了XR制作技术、也更深度地理解了XR生态底层逻辑。首先，XR制作流程是把后期工作大量前置，所以要和前期各团队时刻保持沟通。其次，需要实时监控UE渲染场景的色彩、反差和亮度，当UE场景进入Disguise系统之后，Disguise也会有自己的一个色彩空间的转换。第三，现场的布光一定要和资产场景充分融合，避免灯光在LED 屏上留下明显的痕迹。当场景投放到LED墙上的时候，LED的色温也会改变场景的色彩和反差。总之，每一个环节都需要严谨把控，只有前期要做好充分的准备，现场才有快速解决问题的应变能力。
同时，XR不仅仅是一个好的led屏幕，也不仅仅需要一个好的技术团队， 而是一套新的工作流程，是一种可以把虚拟和现实结合起来的工作方法，是通往元宇宙的一个窗口，也是一个打通线上、线下的解决方案，它改变了原有拍摄形式，我们需要合理的运用科技手段来实现降本增效，为不同系统、不同领域的相互融和发挥重要的作用。
解锁更多精彩视频↓↓
东方AI 爱东方
用爱共绘美好未来
强势关注返回搜狐，查看更多