在《我用AI生成动漫爽文小说,5分钟变现200块》一文中,我介绍了使用智能体(GPTs)完成都市爽文动漫的故事和配图的办法。但是把这样的图文直接发到视频网站,读者面对单调的图片,会感觉非常枯燥。今天我们就是用 4 种 AI 工具,把动漫配图变成可动的动画。

一、AI 工具选择

现在让图片动起来主要有四种办法:1、使用 Runway 使图片生成动画。2、使用SD 的 SVD 模型图生动画。3、使用剪映的3D运镜功能,让照片产生3D效果。4、使用 LeiaPix 让图片生成动画。下面我们逐个使用上面四种办法来让漫画图片生成动画。
一)使用 Runway 图片生成动画
Runway ( https://research.runwayml.com/gen2 )是文生视频和图生视频赛道上老牌的玩家,现在图生视频可以做到 4 秒,而且不影响图片的清晰度,但是Runway 擅长的场景类动画。
我们把图片传到服务器测试下效果,果真脸都变形了效果很一般。
二)使用SD的SVD模型图生动画
SVD 全称 Stable Video Diffusion,就是视频版 SD 现在可以通过 Comfyui 搭建工作流来实现图片转动画。我已经搭建好了 SVD 工作流,现在我们只要把图片传到工作流就能实现一键图片转视频,我们来测试下效果。
但是 SVD 和 Runway 存在同样的缺点,最高只能生成4秒动画,而且更擅长对物体和纯真人的图片转动画,像我们这种动画+复杂场景的无法应对。效果如下,人物都扭曲了,动画无法使用。
三)使用剪映的3D运镜生成动画
视频编辑软件剪映可以用图片制作 3D 运镜效果,保持画面上的人物和物品不动,只有镜头在运动,算一种伪动画,好处就是效果稳定,持续时间长。我们把照片导入剪映,点 AI 特效、玩法、3D运镜或者3D照片。
看了下效果,虽然动画比较简单,效果基本满足我们需求,但是长度只有2.5秒。
我用AI让爽文动漫变可动视频,分分钟成为爆款
四)使用LeiaPix生成动画
剪影的3D动画效果,虽然能满足我们制作绘本的要求,但是有个问题,就是只能生成2.5秒的动画,通常一个分镜的配音没有读完就要重复播放好几次,看起来非常生硬。为了获得更好的动画效果,我们可以使用 LeiaPix 生成3D运镜动画,LeiaPix 可以生成长达10秒的动画。
1、登录 LeiaPix 网站(https://convert.leiapix.com),然后点击中间的 Try for free按钮。
2、点击 Upload 上传我们要生成动画的图片。
3、LeiaPix 开始自动生成动画。
4、最终完成动画生成,并点击右上角 Export 导出完成的动画。
这样我们的 3D 运镜动画就完成了,这个效果和时长完全满足我们做绘本动画的要求了。

五)使用 Sora 生成动画
Sora 是 OpenAI 在2024年2月15日发布的人工智能文生视频大模型,可以稳定的生成电影级视频1分钟,该应用现在还没有对外开放,我们先欣赏下 Sora 生成的视频,待上线后我再使用 Sora制作一段儿童绘本,确切的说应该叫动画电影了。

二、使用剪映制作动画绘本
一)导入素材并拖到时间轴
第一步,在右上角素材位置把智谱清言生成的图片导入进去,并按顺序拖到下面的时间轴上面。这里需要注意的是,按自己发布平台的要求,选择好视频比例。抖音和视频号一般是9:16,西瓜视频和哔哩哔哩一般是16:9。
二)导入故事文本
第二步,点文本、新建文本框,并在把故事文本复制到右侧的框内。
三)生成语音
第三步,点之前生成的文本,选朗读、音色、最后点开始朗读,就能生成语音了。然后拖动时间轴上的图片,让图片和语音一样长。
四)生成字幕
第四步,选中全部的语音,并单击右键,选择识别字幕,生成字幕。
五)导出视频
点右上角,选择导出,并按下图的参数选择,直接导出视频就可以了。这个视频是MP4通用格式,可以在任何平台发布。
三、结语
就这样一个爽文动漫视频就完成了,10分钟也就搞定了,我发到视频号,分分钟就爆款了,整体效果还是非常满意的。

💢周鸿祎说:“如果不把 AI 作为你的武器,那你就像是用古代武器对抗持AK47的对手。” 

互联网大厂一边裁员设计师,一边高薪招聘AI 设计师,AI 已经是设计师必须掌握的技能。

AI时代人人都可以是设计师,有想法有创意, AI 应用普通人零基础也能通过设计变现。

老赵耗时3个月完成了《AI 设计从入门到变现》专栏,小册内容均为客户真实需求,内容涵盖建筑设计、产品设计、AI摄影等领域,均可落地变现,老赵已经通过AI设计变现五位数。把握时代的红利,你需要提早布局。 

今天专栏开启内测,内测期间只要10元,半杯奶茶钱,内测结束后恢复原件599元,现在加入还有答疑群,和超值福利赠送!

立刻开启 AI 设计学习:👇👇👇