前天,Runway 终于开放了新功能文本生成视频,让每一个注册用户都可以使用。虽然一次生成的视频很短,只有 4 秒,但是把这些短片段合在一起后,就足以形成一个小故事。 你可能会有疑问:之前剪映不是实现文本转视...
前天,Runway 终于开放了新功能文本生成视频,让每一个注册用户都可以使用。虽然一次生成的视频很短,只有 4 秒,但是把这些短片段合在一起后,就足以形成一个小故事。
你可能会有疑问:之前剪映不是实现文本转视频吗?
是的,但是又不一样。
这样说吧,它不像剪映、一帧秒创和度咔剪辑一样,根据文案信息,然后从网上找到匹配素材,而是直接根据你提供的文本生成一段视频,就像 midjourney 根据提示词生成图像一样,生成结果都是随机的。
你可以想像,凭借现在的发展速度,假以时日,人人都可以把自己想表现的画面转换成视频,分享给其他人,没有任何技术门槛,每个人都可以成为导演,这是多么不可思议的事情。
不过,回归现实,现在文本生视频到底到了什么水平,不如亲手试一试。于是,我就利用 GPT 和 Runway 生成了一段 30 秒左右的小视频。话不多说,先看成果:
利用 GPT 生成脚本
打开 GPT 官网,先让 GPT 生成故事脚本。
我让 GPT 扮演一个短剧剧本编辑,让它给我生成一段小剧本,剧本内容自己可以随便想,不过不要太复杂,毕竟 Runway 生成能力还是有限的。
我给的剧本内容是一个小女孩在巴黎卖花,具体细节让 GPT 自己想象。
让 Runway 根据脚本生成视频
OK,视频脚本搞定后,我们现在就去 Runway 官网生成视频了。这里建议用电脑端操作,手机生成视频后似乎播放不了。进入 Runway 官网后,选择谷歌或苹果账号登入,进入主页面后,点击“含有 gen 2”选项导入剪映剪辑视频
这里我用的剪辑软件是手机版剪映,其他软件大同小异,也是可以使用的。接下来,我把 Runway 生成的所有片段按顺序导入剪映。然后我们开始为视频配音。由于之前 GPT 生成的故事脚本太长,于是我要求 GPT 把脚本缩短,控制在 23 秒。最后的话
虽然目前 Runway 生成的视频效果不太理想,视频时长也有限,做不到根据一大段文案直接生成广告用于宣传,商业应用还谈不上,但是这个曙光已经出现,我们有理由相信未来几年内技术能发展起来,就像今天 GPT 迅速迭代成 GPT4 一样。不过,我希望那一天 Runway 能多给点免费时长,毕竟生成视频的成本太高付不起啊。重复申请谷歌邮箱的教程链接:《瞬息全宇宙——平行宇宙终极教程》本文思维导图:我是卓 sir,一名希望用 AI 提上我们的效率、改善我们生活的大学生,喜欢各种前沿科技。关注我,邀你一起在 AI 浪潮中野蛮生长。