Sana video : Efficient Text-to-Video and Image-to-Video by NVIDIA NVLabs
Sana video 将高效、高质量的文本到视频和图像到视频生成带到您的浏览器。创建连贯的 720p、16 fps 剪辑,最长可达一分钟,并具有研究支持的性能。在 Story321 上试用 Sana video 并快速发布精美的运动内容。
像专业人士一样提示 Sana video
清晰的意图和时间提示有助于 Sana video 提供一致的运动和风格。
强大提示的关键要素
主体 + 艺术指导
定义谁/什么,加上美学。命名角色特征、材料和风格锚点。
动作 + 相机
描述动词和相机语言以锁定运动和构图。
环境 + 情绪
指定空间、光线和氛围以稳定跨帧的外观。
时间节拍
添加开始/中间/结束节奏以指导短片中的进展。
参考优先的 I2V
对于图像到视频,说明要保留什么与要动画化什么。
专业提示
明确,不要冗长
简短、具体的措辞在运动控制方面优于冗长、诗意的文本。
将运动与时间联系起来
使用秒(“保持 1 秒”、“在 2 秒内加速”)以便时间与剪辑长度相对应。
在短片中迭代
在 3-5 秒内进行优化;在 Sana video 符合您的意图后,进行放大或扩展。
提示优化示例
"一只狐狸在森林里奔跑"
"一只红狐狸沿着苔藓小路飞奔;稳定摄像机位于狐狸高度;晨雾;阳光穿过松树;开始时宽,中间追逐,结束时特写——Sana video 保持构图和运动提示"
"一辆跑车在沿海公路上"
"老式红色跑车,低角度跟踪镜头,镜头光晕,海洋悬崖;平稳滚动;经过两个弯道;在悬崖景色上结束——Sana video 保持速度和构图"
如何在 Story321 上使用
按照以下步骤使用 Sana video 产生一致的结果。
选择模型
从模型列表中选择 Sana video。
选择模式
使用文本到视频进行提示,或使用图像到视频来动画化参考。
编写提示/设置参考
描述主体、运动、相机、时间;上传 I2V 的图像。
设置持续时间、分辨率、fps
选择高达 60 秒、720p 和 16 fps 以获得平衡的质量。
调整控件
调整运动强度、相机抖动、宽高比和种子以实现可重复性。
生成和优化
预览、修剪并在短片中迭代;锁定后扩展。
提示
- •在扩展到 30-60 秒之前,以 3-5 秒的长度进行迭代。
- •在运行中保持主体名称、样式和镜头术语一致。
- •使用诸如“保持 1 秒”之类的时间提示来稳定节拍。
- •对于 I2V 身份,上传清晰、光线均匀的参考。
- •将成功的提示组织为 Sana video 的模板。
诸如 720p、16 fps 和最长 1 分钟之类的规格反映了当前公开的研究说明;有关更新,请参阅项目页面 ([nvlabs.github.io](https://nvlabs.github.io/Sana/Video/) • [github.com](https://github.com/NVlabs/Sana)).
常见问题解答
常见 Sana video 设置和工作流程问题的解答。
开始使用 Sana video 进行创作
原型设计、迭代和发布引人注目的运动内容——Story321 上的 Sana video 为您提供速度、连贯性和研究级别的质量。
性能和规格基于公开材料,可能会随着新版本的发布而发展 ([nvlabs.github.io](https://nvlabs.github.io/Sana/Video/)).