首页 » 软件开发 » 无需逐帧记录即可图片变视频(视频即可无需记录图片)

无需逐帧记录即可图片变视频(视频即可无需记录图片)

南宫静远 2024-07-25 03:14:03 0

扫一扫用手机浏览

文章目录 [+]

被焚之城的山羊陶碗

时光流转,最初,人们在画纸上描绘多张场景、动作连续的图画,通过快速翻动纸张形成动态变化;随后,计算机、摄像机的出现为视频的呈现带来巨大变革,通过 1 秒内拍摄 24 帧以上画面,可以达成一种快速连贯的动态视觉效果,在模拟自然场景的随机动态(如云和流体)或特定领域的运动(如人体动作)方面取得了很大进展。

花的盛开过程

无需逐帧记录即可图片变视频(视频即可无需记录图片) 软件开发
(图片来自网络侵删)

然而,当前的技术在展示其他领域内物体的动作协调性、场景细节连贯性等方面,仍面临挑战。
比如准确捕捉和展示自然界中一朵花盛开的完整周期,人们就需要真的等待花开,并逐帧记录。

静态图+girl's hair blowing in the wind=过程动态视频

近日,由港中文、腾讯 AI Lab 强强联手推出的 DynamiCrafter 模型,无需再繁琐地一帧一帧记录图像,也不仅仅局限于自然场景的随机动态或特定领域运动,DynamiCrafter 几乎能够结合任何领域的静态图像和文本提示,瞬间就能变幻出超逼真的动态视频!
而且,高清晰、超流畅、无缝衔接,每一个细节都能拿捏得恰到好处!

静态图片+boy walking on the street=过程动态视频

无论你是想看优美风景图的变化过程,还是不同人物的精彩瞬间,亦或是萌宠、豪车、艺术雕塑的动态场景,DynamiCrafter 能够轻松驾驭各种风格,定制你的专属动态视频记录!

起始帧图片+结束帧图片+a smiling girl=过程动态视频

此外,DynamiCrafter 在应用场景上更是大显神通:打造情节跌宕的故事视频、循环播放的魔性小视频,甚至是让每一帧都丝滑过渡的帧插值技术,创意动画视频的制作从此 So easy!

为了帮助大家更好地体验 DynamiCrafter,OpenBayes 平台上线了「DynamiCrafter AI 视频生成工具」教程!
该教程为大家搭建好了环境,无需再等待模型下载训练,点击克隆即可一键启动,丝滑视频瞬间制作!

公共教程地址:

https://go.openbayes.com/yHXZR

以上教程基于 WebUI,简单易用,但局部精准化控制有限。
相反,ComfyUI 基于节点式的界面和工作流,可以通过改变节点来实现不同的效果,进而实现精细化控制,赋予用户更高的自由度和创作空间。

因此,OpenBayes 平台同时上线了「ComfyUI DynamiCrafter 图生视频工作流」。
该教程帮助大家提前下载模型,为用户搭建好了工作流,一键即可使用,具体教程详情看 OpenBayes 今日发布的次条内容。

操作步骤

PART 1

Demo 运行阶段

1. 登录 OpenBayes.com,在「公共教程」页面,选择「DynamiCrafter AI 视频生成工具」。

2. 页面跳转后,点击右上角「克隆」,将该教程克隆至自己的容器中。

3. 点击右下角「下一步:选择算力」。

4. 跳转后,选择「NVIDIA GeForce RTX 4090」,点击「下一步:审核」。
新用户使用下方邀请链接注册,可获得 4 小时 RTX 4090 + 5 小时 CPU 的免费时长!

小贝总专属邀请链接(直接复制到浏览器打开):

https://openbayes.com/console/signup?r=GraceXiii_W8qO

5. 点击「继续执行」,等待分配资源,首次克隆需等待 3-5 分钟左右的时间。
当状态变为「运行中」后,点击「打开工作空间」。

若超过 10 分钟仍处于「正在分配资源」状态,可尝试停止并重启容器;若重启仍无法解决,请在官网联系平台客服。

6. 该教程可以实现以下 2 种效果,下面将逐一为大家演示: 通过图片和文本提示生成视频; 通过起始帧、结束帧和提示词生成视频。

PART 2

通过图片和文本提示生成视频

1. 新建一个终端,运行「cd DynamiCrafter」切换至 DynamiCrafter 目录下。

2. 执行「python gradio_app.py」命令,稍等片刻,当命令行出现「https://0.0.0.0:8080」后,拷贝右侧 API 地址到浏览器地址栏中打开 Gradio 界面。
请注意,用户需在实名认证后才能使用 API 地址访问功能。

3. 打开 Gradio 页面后,上传一张照片和并增加一段文本描述(例如:fireworks display),点击「Generate」后,稍等片刻,即可生成视频。

PART 3

通过起始帧、结束帧和提示词生成视频

1. 返回终端界面,通过「Ctrl + C」终止当前进程后,随后运行「python gradio_app_interp_and_loop.py」命令,待命令行出现「https://0.0.0.0:8080」后,打开右侧 API 地址。

2. 在 Gradio 页面,上传一个起始帧图片、结束帧图片以及一段文本描述(例如:a smiling girl),点击「Generate」即可生成视频。

新用户福利

注册福利:点击下方邀请链接注册,即可获得 4 小时 RTX 4090 + 5 小时 CPU 的免费算力时长,永久有效!

小贝总专属邀请链接(直接复制到浏览器打开):

https://openbayes.com/console/signup?r=GraceXiii_W8qO

相关文章

语言中的借用,文化交融的桥梁

自古以来,人类社会的交流与发展离不开语言的传播。在漫长的历史长河中,各民族、各地区之间的文化相互碰撞、交融,产生了许多独特的语言现...

软件开发 2025-01-01 阅读1 评论0

机顶盒协议,守护数字生活的新卫士

随着科技的飞速发展,数字家庭逐渐走进千家万户。在这个时代,机顶盒成为了连接我们与丰富多彩的数字世界的重要桥梁。而机顶盒协议,作为保...

软件开发 2025-01-01 阅读1 评论0

语言基础在现代社会的重要性及方法步骤

语言是人类沟通的桥梁,是社会发展的基础。语言基础作为语言学习的基石,对于个人、社会乃至国家的发展具有重要意义。本文将从语言基础在现...

软件开发 2025-01-01 阅读2 评论0

粤语电影,传承文化,点亮时代之光

粤语电影,作为中国电影产业的一朵奇葩,以其独特的地域特色、丰富的文化内涵和鲜明的艺术风格,赢得了广大观众的喜爱。本文将从粤语电影的...

软件开发 2025-01-01 阅读3 评论0

苹果游戏语言,塑造未来娱乐体验的基石

随着科技的飞速发展,游戏产业逐渐成为全球娱乐市场的重要支柱。在我国,游戏产业更是蓬勃发展,吸引了无数玩家和投资者的目光。而在这其中...

软件开发 2025-01-01 阅读1 评论0