—— 微资讯 · 微课程 ——
利用零碎时间，走上超神之路！
以前我们把实拍素材变成风格化效果的时候（比如卡通或者绘画效果），是直接在动态视频上添加滤镜，这种效果看起来滤镜是在人物/动画表明啊滑动的，也就是底层动画与表层滤镜是分离的。还有就是效果完全由滤镜的决定，没办法自定义风格。而本篇文章的主角EbSynth使用了另外的思路: 提取实拍素材的一张画面，然后基于这个画面可以进行任何的风格创作，然后使用动态序列对这个静态风格图片“K"动画（实际上是复杂的动画驱动算法）最大限度保留了风格画原有的像素和细节。目前，这个技术已经不仅仅限制在这方面的运用，对于各种跟踪，擦除，给角色配饰（比如皱纹，口罩，纹身等），已经在特效行业中开始运用了~黑科技颠覆传统思路，也会毁掉很多人的饭碗~
工具背后的团队拥有更多的能力。
不久前，我在网上发现了一个名为EbSynth的新工具的演示，该工具基于单个输入关键帧将实景视频带入绘画世界。这真是令人着迷。从那时起，Secret Weapons的工具已用于许多其他用途，现在它可能已经可以进行VFX行业制作工具。我们采访了 名为秘密武器开发三人小组，询问了EbSynth的发展方向，在不久的将来深度学习可能会在哪里以及如何很快成为可投入生产的工具。EbSynth是如何从轮廓拷贝工具发展到今天的强大工具？
秘密武器：我们创建了EbSynth作为自动的轮廓拷贝。这样做的动机是帮助我们的首席艺术家Jakub将他的概念艺术设计变为动态。但是，一旦我们向公众发布了这个工具，人们便开始将其用于各种不同的目的。他们接受了关键思想，即EbSynth会将一帧（或一组关键帧）中所做的更改传播到整个视频中，从而变成动态的视频驱动。有时候，人们使用它的方式令我们感到惊讶。例如，卡通增强。艺术家开始为2D动画添加纹理和阴影，它看起来很棒。3D艺术家正在使用EbSynth通过绘画笔触来破坏抛光的3D外观，我们认为这是惊人的。然后有人将它与Faceapp一起使用，以在视频中老化自己。那对我们来说是一个激动的时刻。当然，您可以使用EbSynth进行VFX修改！您可以进行逼真的编辑，而无需在视频框架上绘画。EbSynth不在乎，它会将关键帧中的任何内容传播到中间。大约在那个时候，爱尔兰人电影在Netflix上映，在观看纪录片制作时，我们意识到EbSynth也可以用于专业VFX制作。我们认为，它有很大的潜力来加快许多工作，而这些工作原本就必须繁琐地跟踪。我们在网上看到的结果通常非常有趣，我们喜欢观看所有破坏性的电影场景或黑白电影的彩色镜头。人们可能会认为有A.I.还是EbSynth的深度学习方面，但我不认为这是工具一部分吗？A.I.将来成为EbSynth的一部分吗？
秘密武器：EbSynth不涉及任何AI。我们的目标是尽可能地尊重关键帧的内容，并为艺术家提供对过程的最大控制。使用当前的深度学习技术很难做到这一点，因此我们决定采用其他方法。EbSynth的作用是基于非参数示例的综合。它通过将输入关键帧切成许多小块来工作，然后将其重新组装以形成输出帧。这样，输入像素将保留为1：1。尽管EbSynth目前不使用AI，但我们正在密切关注机器学习的研究，并且我们正在探索在EbSynth中利用AI的机会。最近，我们一直在研究如何使用深度神经网络来改善光流估计。您现在对EbSynth的某些电影，VFX或动画用途有什么看法？
秘密武器：我们相信EbSynth可以成为VFX艺术家的强大工具；他们可以将其视为免费的2D跟踪。现在，可以轻松地将单个帧中的任何编辑或照片处理传播到其余帧。它可用于去除斑点，添加数字化妆品，老化人物，重新照明，美化，进行局部颜色更改或为整个黑白胶片着色。有时，它甚至适用于roto。您在一帧中绘制蒙版，然后EbSynth为您设置动画效果。它可以在2D卡通中添加纹理和阴影，通过笔触增强3D渲染，动画中最重要的用例是rotoscope。您可以使用DIY道具拍摄自制视频，例如使用袜子拉长耳朵，然后在一帧上画一个外星人，然后EbSynth使其栩栩如生。那就是我们看到工具创造潜力的地方。即使没有很多资源的艺术家也可以创建复杂的动画内容。https://ebsynth.com/
本站仅提供存储服务，所有内容均由用户发布，如发现有害或侵权内容，请
点击举报。
