深度视频:视频转深度图
把短片转换为灰度相对深度视频,免费预览、下载 MP4,也可带入角色模板,作为新角色的动作参考。
对照原视频与深度视频
查看同一段咖啡场景转换前后的区别:原彩色视频与估计出的深度视频。分别播放两段,观察去掉原片颜色和纹理后,人物、杯子与台面的空间轮廓怎样变化。
1. RGB 彩色原片
15 秒动作片段:杯子不断被移动,另一人继续加料,因而接连倒空。人物、服装、颜色和背景都保留在原片里。上方“试用咖啡片段”加载的就是这份输入。
2. 灰度相对深度视频
估计画面中各处的相对远近,用灰度呈现人物、杯子和台面的空间变化。原片颜色和纹理被去掉,得到可与角色图片搭配使用的空间参考。
深度视频保留的是随时间变化的相对远近估计。对照彩色原片时,重点查看小道具、手指和面部:这些细节可能被简化或丢失。用于其他工具的动作参考前,先检查你在意的动作信息是否仍然清楚。
导出的深度视频没有声音;需要继续剪辑时,请另外保留原始音频。角色视频生成和配乐选项由咖啡模板另行提供,与这里的免费深度转换分开。
原作动作:TikTok 的 Mr and Mrs Stretchy什么是深度视频?
灰度明暗表示估计的相对距离:近处较亮,远处较暗。工具会分析视频中的深度变化,导出同样时长的灰度 MP4。这是真正的深度估计,不是黑白滤镜。
“相对深度”描述同一画面里哪些表面更近、哪些更远,亮度不代表以米为单位的距离。原片里颜色很深的手或道具,只要位置较近,在深度图里也可能较亮。去掉纹理后,更容易单独观察画面的空间层次。
制作角色同款时,深度视频提供场景结构与动作的参考,角色图片提供希望呈现的外观。它能让你准备一份减少 RGB 外观信息的参考素材,但最终画风与动作仍取决于视频模型对整组输入的理解。
如何把视频转换成深度图
选择短视频
上传最长 15 秒、最大 50 MB 的 MP4、MOV 或 WebM,也可先用上方的咖啡示例。播放原片,确认需要的动作完整落在片段里;较长的视频请先在其他工具中裁剪。
转换并检查深度
点击“转换为深度视频”。首次转换会下载模型,处理时保持标签页打开,按进度等待,也可取消。完成后对照原片,重点看手、小道具和人物重叠处的轮廓是否足够清楚。
下载或继续创作
将无声的深度 MP4 保存到设备。想制作角色同款时,点击转换结果旁的“用于咖啡模板”,即可把视频放入模板;再准备角色图、查看报价,由你发起另一次生成。
换上你自己的角色
将结果放入咖啡模板,添加两张角色图,查看当前报价后再生成。深度视频提供结构与动作参考,角色图提供外观;成片后再检查画风与动作是否符合预期。
检查咖啡同款时,可以按舀粉落空、移杯、倒水、倒奶的顺序看动作。角色长得像,不代表笑点成立;还要确认杯子与加料时机是否形成错位。下载的深度文件也可留给其他接受视频参考的工具使用。
深度视频可以用来做什么?
为角色同款准备动作参考
选择动作清楚的短场景,转换为深度视频,再另用角色图片指定演员外观。咖啡模板提供了一条具体的双角色路径;换成你自己的片段时,仍需让场景与模板指令相符。
减少颜色干扰,观察动作结构
对照彩色原片与深度视频,查看人物遮挡和物体的空间变化。在花积分生成角色视频之前,先找出深度估计中丢失细节的位置。这里预览的是相对结构,并不重建一个可自由转动的三维场景。