分享

神奇的AI视频:第一代Runway(video-to-video)

 天童老僧 2023-04-26 发布于上海

  当前AI的神奇之处,在于能创作,如写总结、写小说、写代码、创作音乐……,可以说无所不能,在其中还有一项神奇的技术就是AI视频,可通过文本或图像生成视频。

  目前比较出名的有Runway,它是全球规模较大的人工智能公司,致力于图片和视频AI编辑软件的开发服务。拥有30多AI Magic Tools、实时视频编辑、协作等功能,包括视频生成视频,文本到图像、图像到图像、替换背景、绿屏、擦除和替换等,可以对静态图像或视频进行操作。因为具有人工智能的支持,可以提供给完美的视频效果、格式和颜色校正等。Runway还允许用户训练自己的人工智能模型,让AI更容易地从文本提示中生成符合期望的图像。

  •   一、登录

    1.访问网站:https:/// ,点击免费试用。

图片

    2.进入网站登录和注册界面,如图,需要邮箱注册,也可以用谷歌邮箱直接登录。登录后,弹出使用方式 ,可免费试用,也可使用充值服务。免费试用可享受125个信用币,3个视频项目和3个编辑器等。

图片

二、界面和功能

1.主工作界面:左侧是命令栏,包括AI创作工具、AI训练和作品库 

                      右侧是AI创作工具选择、操作区和作品显示区。

图片

2.AI工具:包括视频生成视频(第一代)、训练自己的生成器、去视频背景、文生图、图生图、扩展图像、擦除和替换、无限背景等30个AI视频和图像工具,各AI工具见下图。

图片图片图片

三、实例测试:视频生成视频(第一代)

    此次只测试视频生成视频,在主界面点击“Video to Video”AI工具,进入上传视频界面,添加要处理的视频(如一个在草地上跳舞的人)。添加完成后,进入视频生成界面,左侧是视频预览区,右侧为功能选择和提示词输入区。

图片

  1.文生成视频

  想要将此草地上跳舞视频变成水中跳舞视频。在右侧的“Style reference”样式参考,选择文本提示词方式(Prompt),输入想要修改视频的文字提示词:Beauty, exquisite face, dance, flower fall, on the water,其他选项默认,如上图所示,然后点击“Generate”生成按钮,得到生成的视频。

图片

视频欣赏:

图片

图片

说明:生成的视频动作一致,背景符合,但人物画面效果模糊

2.预设材质方式

    将真实视频影像转换为不同材质制作的视频。在右侧的“Style reference”样式参考,选择预设方式(Presets),选择想要的材质效果,如粘土、水彩、折纸、钢笔和墨水、木炭素描、云景等,其他选项默认,如图所示,然后点击“Generate”生成按钮,得到生成的视频。

图片

视频欣赏

Cloudscape(云景)

图片

Watercolor(水彩)

图片

Paper origami(折纸)

图片

Pen and ink(笔和墨水)

图片

Charcoalsketch(木炭素描)

图片

Claymation(粘土)

3.图生视频:这项功能需要充值升级,暂时没有测试。

图片

小结:

  1. Runway的视频生成视频功能体验,生成的视频不超过3秒。

  2. 有些AI工具的功能需要充值升级,才能使用。

  3. 当前测试的是Gen1(第一代),视频效果还不是很成熟,Gen2(第二代)已经推出,后期将测试第二代的效果。

  4. Runway的30多个AI工具,很多较实用。

  5. Runway Gen1(第一代)主要对现有视频的修改为主,Gen2(第二代)将体现创作新视频

图片

欢迎技术交流

    本站是提供个人知识管理的网络存储空间,所有内容均由用户发布,不代表本站观点。请注意甄别内容中的联系方式、诱导购买等信息,谨防诈骗。如发现有害或侵权内容,请点击一键举报。
    转藏 分享 献花(0

    0条评论

    发表

    请遵守用户 评论公约

    类似文章 更多