一条长相潦草的鱼在不同AI软件里的样子，这是它在runway里动起来的样子，这是它在ModelScope y的样子。在video craft中则是死于一条animated drawings，则是把鱼放到福岛和沸水里了。而这是咱们今天的主角breeding life in sketches。这项由英伟达参与研发的技术，成功解决了素描画在AI视频中动起来时序列帧的一致性，以及降低画面的抖动，给人一种潦草但精致的感觉，同时还降低了传统的动画生成时需要人工标注关键帧或者运动路径的人力成本，只需要一个描述动作的文本提示就可以自动生成动画。具体来看，用户上传的素描会被处理为一组参数化的笔画，每个笔画由其控制点的坐标确定。这些控制点在视频的每一帧都被复制形成一个初始的帧序列，然后使用一个名为神经位移场的网络来预测每一帧中每个控制点的位移。作者通过引入一个名为评分蒸馏采样的损失函数来完成实现从预训练的文本到视频扩散模型中提取运动信息。这种方法使得网络不需要大量的训练数据。相较于其他AI视频工具，这项技术能直接作用到动画制作中，提高动画制作的效率，特别是那些需要大量手工绘制的动画。假如把这技术中心的控制点当做控制物体运动的关键点，在游戏开发中新工具可以用于快速创建角色动画或者环境动画。
《AI绘画与动画制作攻略：解锁创意无限可能》
在当今数字化时代，AI软件为绘画和动画制作带来了全新变革。就像一条长相潦草的鱼，在不同AI软件里呈现出各异姿态。比如在runway、ModelScope、video craft等软件中，鱼有着独特表现。今天要重点介绍的breeding life in sketches技术，由英伟达参与研发。它解决了素描画在AI视频中动起来时序列帧一致性问题，还降低画面抖动，带来潦草却精致之感。而且大大降低传统动画生成人力成本，只需文本提示就能自动生成动画。
具体操作是，用户上传素描会被处理为参数化笔画，由控制点坐标确定。控制点在各帧复制形成初始帧序列，通过神经位移场网络预测位移。作者引入评分蒸馏采样损失函数提取运动信息，无需大量训练数据。相较于其他AI视频工具，此技术直接用于动画制作，提高效率，尤其对大量手工绘制动画帮助极大。在游戏开发中，把控制点当作控制物体运动关键点，新工具可快速创建角色或环境动画。掌握这些，就能在绘画和动画创作领域大展身手，开启创意无限的旅程。
AI软件,鱼,runway,ModelScope,video craft,breeding life in sketches,英伟达,素描画,动画制作,游戏开发
[Q]：breeding life in sketches技术有什么作用？
[A]：解决素描画在AI视频中动起来时序列帧的一致性，降低画面抖动，降低人力成本，提高动画制作效率。
[Q]：这项技术是由谁研发的？
[A]：由英伟达参与研发。
[Q]：用户上传的素描如何处理？
[A]：会被处理为一组参数化的笔画，每个笔画由其控制点的坐标确定。
[Q]：如何预测每一帧中控制点的位移？
[A]：使用一个名为神经位移场的网络来预测。
[Q]：怎样从预训练文本到视频扩散模型中提取运动信息？
[A]：通过引入一个名为评分蒸馏采样的损失函数来完成。
[Q]：这项技术相较于其他AI视频工具有什么优势？
[A]：能直接作用到动画制作中，提高动画制作的效率，特别是那些需要大量手工绘制的动画。
[Q]：在游戏开发中这项技术有什么用途？
[A]：可以用于快速创建角色动画或者环境动画。
[Q]：这项技术能降低哪些成本？
[A]：降低了传统的动画生成时需要人工标注关键帧或者运动路径的人力成本。