粉丝243.0万获赞1813.5万



runway jane 人工智能模型发布, jane 的发布意味着文本转视频技术得到了进一步的提升。 jane 在 jane 的基础上增加了三个新的模式,模式一,输入文本命令即可转换为视频 模式二,文本加图像,生成对应的视频内容。模式三,图像转视频,也就是在原图的基础上生成相匹配的视频。目前 genre 模型已经在 discover 上开始内部测试, 现在我们只需登录到自己的 runway 账号就可以免费体验了。进入 runway 的官方网站,点击 send in runway, 使用自己的 google apple 账号登录,或者使用邮箱注册一个新的账号, 登录到 runway。 点击左下角 jenny beta, 就可以获得四百点免费试用额度。点击该链接,系统会提示选择账户类型。我们可以选择左侧的免费账号,如果你不拆钱,也可以升级成为高级账号,获得更多的点数。 登录到操作页面,免费账号会赠送一百二十五点数,加上四百点试用点数,总计五百二十五点 credit, 可以生成三十七秒的视频。这样一模型的操作方法非常简单,在屏幕的中间点击上传一段视频, 或者使用系统自带的演示视频片段完成上传。左侧可以预览视频,右上方可以选择三种不同风格,下方则可以调整 参数。首先我们选择第一种风格 image, 点击右上角 images, 从素材库中选择一张赛博朋克风格的图像,风格强度选择默认值百分之五十,点击下方 generate 按钮。从生成的片段可以看出, 原有视频已经转换成了看图像类似的风格,尽管人物整体变化不大,遗憾的是人物的面部变得很奇怪。 选择第二段视频,并选择岩浆图像作为替换。我把风格强度设置为百分之十五, 该数值越低,图像对原视频的影响也就越小。从生成的片段可以看出,原有的蓝天已经变成了容颜,效果还是不错的。上传一段新的视频, 选择一张极简风室内图案,风格强度设置为百分之七十。从生成的片段可以看出,原有的铁路背景已经被更换为看图像内容类似的室内背景。 此外,由于风格强度值设置的较高,人物在视频中的权重已经明显降低。 现在我们来测试第二种风格, preset 预设模板。该模式的使用方法非常简单,你只需在右侧选择任意一个预设的 preset, 就可以轻松改变原有的视频风格。例如,我们可以选择 pen and ink preset。 从生成的片段可以看出,视频已经具备很强的钢笔画风。上传另外一段视频,选择一个名为 cloudscape preset。 从 生成的短视频可以看出,原视频中的小狗已经变成了类似棉花糖和彩色泡沫的物体,非常有趣。如果你喜欢这段视频,也可以点击右上方确认按钮,把视频片段保存到本地。 此外,大家还可以改变风格强度值,获得不同的效果。在该模式下,风格强度值越低,越接近原视频的风格风格。三、 prom 图文本命令输入 选择上方第三项,也就是 prompt, 我们可以在对话框中输入任意命令来改变原有视频风格。 输入命令 at founder effect, 原视频中就会出现明显的闪电效果。输入 ufo 磁条,原视频中的人物就会变成外星人, 手中的冲浪板也变成了飞碟,非常有趣。现在我们尝试输入另外一组命令 turned off to cat。 不过从实际生成的视频片段可以看出,系统并未理解该词条的意思,仅仅把背景换成了一只猫。 总结一下战役模型的优缺点,该模型是首批向公众开放的文本转视频工具之一,具有划时代的意义。不过由于技术不成熟,战役模型还无法达到类似 new journey shot gpt 的智能化程度。 have fun bye bye!