为 Marvel TV 的“Echo”编写 Choctaw 的创作故事
2024年09月16日
之前和之后的特色
数字王国如何使用 Foundry 的 Mari 制作逼真的数字替身和漫威电视真人秀的复杂转换序列。
图片来源：漫威影业。
有一件事是肯定的：数字王国对漫威电影宇宙并不陌生。数字王国的艺术家参与了《X战警》中自由女神像结局的高潮部分工作，为《蜘蛛侠：英雄无归》重建了纽约的部分地区，在《复仇者联盟：无限战争》中将超级反派灭霸搬上了银幕等等。
但即使有这份简历，由于这个故事具有强大的文化和神话根源，为漫威电视连续剧《回声》的 CG 元素添加纹理也是一项独特的挑战。“该节目围绕 Maya Lopez 展开，她是漫威电影宇宙中第一个聋人土著超级英雄，”数字王国纹理秀总监 Nick Cosmi 开始说。“在数字王国，我们知道我们必须获得正确的视觉效果，才能正确描绘一个在屏幕上很少见的社区。”
为了了解更多信息，我们采访了Cosmi，了解数字王国如何使用Mari为第一集的开场序列添加纹理，从而将乔克托传说中的标志性故事变为现实。
Chafa 的诞生
Echo 的开场序列是与 Choctaw 代表密切合作开发的，描绘了第一个 Choctaw 祖先 Chafa 的故事。该序列看到 Chafa 和其他 Choctaw 祖先从地下洞穴的水中出现。然后，她帮助祖先们从一场摧毁洞穴的地震中逃脱，然后他们都到达了美国，蜕掉了他们的粘土皮肤，露出了人的形态。
图片来源：漫威影业。
数字王国在流程的早期就开始参与其中，帮助前期制作确定序列的外观，该序列实际上是在围绕游泳池建造的布景中拍摄的，由化妆实用的演员组成。然而，为了可视化所涉及的破坏和角色效果的全部规模，该团队需要用 3D 环境和数字替身替换实际的布景和演员。
实现这一目标的第一步是与 Clear Angle Studios 合作创建激光雷达扫描，这些扫描用作 3D 重建的基础参考。然后选择Mari，将激光雷达扫描演员的纹理参考与3D数字替身相匹配。“多年来，我们的工作室一直信任Mari的数字人类。它是我们主要的纹理绘画软件，“Cosmi 说。“角色工作需要精确地将纹理与现实生活中的主题相匹配。Mari为我们提供了简化这一过程的工具。
使用照片投影创建纹理
为了创建纹理，数字王国的团队使用照片投影来确保扫描图像完美匹配。这对于像 Chafa 从泳池中出现这样的镜头至关重要，因为板和 CG 角色需要无缝融合在一起。
图片来源：漫威影业。
该团队首先将他们的通用人体网格包装到 Clear Angle 的扫描几何体中。然后，他们利用了 Clear Angle 提供的其他资产，包括摄像机布局和随附的演员高分辨率照片。“在建模过程中，我们检查了面部和身体上的关键标志，以确保相机中的图像平面不仅与扫描的网格对齐，而且与包裹的网格对齐，”Cosmi 解释道。“我们还使用Nuke来收集所有可用的高分辨率照片，应用STmap来消除它们失真，然后进行任何需要的进一步色彩校正。”
一旦准备好了未变形和色彩校正的图像，它们就会与相机布局一起导入到Mari中。使用 Mari，艺术家可以锁定图像比例，然后将高质量的纹理重新投影到角色模型上。对于Echo来说，这种高质量非常重要：Mari可以将地图从扫描的几何体直接传输到工作室网格，但Digital Domain的艺术家发现，从扫描中提供的反照率贴图并不是制作的理想分辨率。使用照片投影为这个问题提供了一个简单的解决方案。
Cosmi 解释说：“大多数行业都试图转向程序化纹理和材质，但在重新创建 1：1 纹理资产时，照片投影仍然是我们数字王国最重要的工作流程，尤其是对于角色。“我在Nuke和Mari之间来回跳转，确定哪些图像对于覆盖整个资产是绝对必要的。而且，只要我在此过程中检查我的颜色和值，并通过保持照片和相机的命名相似来保持井井有条，就有可能在一天内创建一个覆盖整个身体的漫反射通道。
使用Mari的好处
除了使艺术家能够快速创建1：1纹理外，Mari还为数字王国团队提供了其他一些好处，例如在清理扫描时更容易修复问题区域。“角色扫描在眼睑、鼻孔和下巴下方等人体的角落和缝隙中总是有缺陷，”Cosmi 说。“我们花在修复人类嘴唇内部的时间比我们花在身体大多数其他部位上的时间都多！”
图片来源：漫威影业。
Mari的Paint Through工具帮助纠正了这些问题区域。对于 Echo，该团队使用它来填充数字替身上的空白，其中包含照片中看起来相似的细节。他们还使用 Towbrush 进一步混合工作以创建完美的纹理，帮助优化从假肢到演员皮肤的过渡。
对 Cosmi 的工作至关重要的另一个 Mari 功能是 Source Grade。这有助于艺术家在照片并不总是提供从上到下所需的精确颜色的情况下，以及在不同的照明场景中为角色添加纹理。“使用 Source Grade，我能够在投影时直接在绘画缓冲区中对图像进行轻微的拨号、颜色微调和分级，以达到我需要的效果，”Cosmi 解释道。“我不必在外部软件中对图像进行完美的色彩校正，只需在绘画时拥有这个即时选项即可进行这些细微的调整，从而节省了无数的工作时间。它甚至允许我拍摄任何图像，并立即将其转换为黑白版本，以便将 Luminance 绘画成蒙版。
数字王国团队现在已经完全过渡到Mari的节点图，它还通过解锁图层堆栈无法实现的绘画选项来帮助艺术家，例如在所有资产之间共享通用设置或模板。“这就像创造一个完美的食谱，你可以一遍又一遍地使用它，”Cosmi 补充道。“我们还构建了许多依赖于摄影元素的材质，它们更符合基于物理的渲染值。这帮助我们作为一个部门获得了预期的结果，我们知道我们可以比以往任何时候都更有信心地转向 lookdev。
赋予艺术家权力
当 Echo 的开场序列完成时，数字王国的纹理艺术家已经创建了四个角色资产：一个男性和一个女性数字替身，每个角色都有超精确的人类和粘土版本的网格。虽然大量的Mari工具有所帮助，但Cosmi表示，该项目的成功并不是由于任何特定的工具。相反，它是关于 Mari 的整体能力，即为艺术家提供一种用户友好的方式，将传统艺术技术应用于他们的作品。
当团队在 Echo 的开场序列中面临最大的挑战之一时，这尤其有用，该挑战涉及在 Chafa 的手腕和手上创建自定义版本的纹身。有几次镜头中，Chafa 的手腕呈旋转姿势，手掌朝向天花板。因此，团队最初创建的纹理变得非常扭曲。多亏了 Mari，该团队能够以更清晰的纹理重新创建纹身，以确保在匹配镜头中保留细节。
“我们的第一道纹理尽可能地与原演员的妆容相匹配，”Cosmi 说。“在后来的版本中，我们添加了几个隔离遮罩来匹配概念艺术的布局。这是一个非常艺术的过程，而不是一个技术过程。归根结底是手绘和准确性，有很多方法可以解决这个问题，从简单的画笔，到使用 Alpha 和 Paint Through，再到使用 Slerp 工具和 Grid Warp 拨入蒙版的位置。
“无论你选择哪种方法，”他总结道，“重要的是创造力不受阻碍。我们鼓励我们的艺术家观察照片、匹配细节，并包括生活提供给我们的独特性和构图。作为一名传统的画家和插画家，我喜欢在处理资产时尽可能多地手绘。程序方法通常看起来过于随机且依赖于运气。值得庆幸的是，Mari仍然提供久经考验的绘画方法和工具集，让像我这样的艺术家能够让纹理栩栩如生，同时保持工作流程的高效。