当前位置: 首页 > article >正文

视频字幕处理+AI绘画,Runway 全功能超详细使用教程(4)

runway的视频字幕处理、AI绘图功能介绍,感觉完全就是为了做电影而布局,一整套功能都上线了!想系统学习的必收藏!


在深度研究Runway各个功能后,无论是AI视频生成及后期处理技术,还是AI图像生成技术,Runway都很能打,AI视频领域大有可为!


接下来开始详细讲解Runway导航栏中按顺序讲解每个功能;

3f0bb63ce295e9096f3adf251c4700d9.jpeg


Edit audio & subtitles(音频字幕处理工具)


Runway在音频字幕处理方面提供了4个功能:

d295b993a61657b5fe009624885cf40b.jpeg


首先点击左侧导航栏,点击“Edit audio & subtitles”,页面会弹出4个工具选项


bb1d8c31b469db136f088dbbb770be6d.jpeg


Clean Audio (去噪声)

点击Clean Audio,跳转音频处理界面


bde518afeee35e9cde1d86f68101c7d2.jpeg


接着上传视频


9e222666641df7c0ec7f19449d36382e.jpeg


接着点击Clean Audio按钮,大约等待几秒时间,就能得到消除噪音后的音频。


dfbfcc1475bf9bae98b55b9e5d052833.jpeg


Remove Silence (删除静音)

点击Clean Audio,跳转音频处理界面


6890d4fc2e38312d55294b55fa40c92b.jpeg


同样上传需要处理的视频文件。


e24d800c1e95ed58dc23ba09e939600d.jpeg


视频上传后,系统会自动检测静音部分,并将其标注红色。


fd9f200b1a06d7a5866b505f17e14cad.jpeg


在右侧参数Threshold,Padding一般就确定默认值,最后点击“Remove Silence"去除静音部分,即可保存下载视频。


91ecfa944456612fa0157901fd6ac842.jpeg


Transcript(音频转文本) 

点击Transcript,跳转音频处理界面


f0d007fbc0b05b7f0f7df7f4480de11f.jpeg


同样上传需要处理的视频文件。


a6a3352b5a99e4e812552aaeb6f3fbbb.jpeg


视频上传后,在右侧框中勾选转化后的文本语种,目前系统只支持生成10种语种,很可惜,并没有中文,然后点击“Generate”。


11dc417b221781a969b2ccce3ec4f927.jpeg


351591757887d19f673da9865b8cdf32.jpeg


静等几秒后,页面会弹出提取后的文本内容,如果你想对其进行修改,可以点击“Edit .srt”。


d0f1f9c2c1fd942715842c38f4e4076f.jpeg


对文本框中的内容进行编辑,检查没有没有问题的话,即可点击Download .srt下载文档。


c1a85123846a9f490b0c7742f954a3a2.jpeg


Subtitles(生成字幕)

点击Subtitles,跳转视频处理界面,同样上传视频,提供设置,可以通过文本转换技术,将音频的转录文本转换为字幕格式,方便用户查看。与剪映的智能字幕类似,这个功能是付费功能,这里就不做演示。


30debc7961594301762594fa513f19a2.jpeg


以上就是Edit audio & subtitles4个功能介绍。


接下来将讲解图像功能模块

lmages图像生成处理技术有两大功能

  • Generate images(图像生成功能)
  • Edit images(图像后期处理功能)

ed341b2756118b4c2cbb7bbc1a47b68c.jpeg


包含了文生图/图生图/扩图/扣图/智能修复等12个图像生成处理功能


lmages

(1)Generate images

Runway图像生成技术模块有5个工具


d72871c0e8a983160191ddbc586b1a0a.jpeg


e8d267cdc7f04179bc6a0eb3bf61a39e.jpeg


Text to lmage (文生图工具)

这个功能只需输入提示词即可生成图像,首先点击“Text to lmage”选项


61e0908baef06960cb709511ffa650f4.jpeg


进入编辑界面,首先在右侧基础选项进行勾选。


9f89c2cd080b07e29e992aee5096c586.jpeg


接着在对话框中输入提示词,最后点击Generate即可生成图像。


020f53fc8eb4bb841c19236c1f7f82c2.jpeg


生成后的图像效果非常不错。


d7c5cae4c21dc190f738beb327a0de75.jpeg


Image to lmage(图生图工具)

这个功能只需上传图片,系统即可生成相似的图像,首先点击“Image to lmage”选项。


d683e83baa01c0e2f1e2ef6ef4124503.jpeg


接着上传提前准备好的图片


19d15aeb833f7346c25d3d27c5e2c855.jpeg


进入编辑界面,首先在右侧基础选项进行勾选。


bd021ab792cbe1620d6fb1e8894f5b90.jpeg


同样你也可以输入提示词,让生成的图像更完美,最后点击Generate生成图像


089322a04435929b97a14735a203d8a1.jpeg


Train your own(训练模型工具)

这个功能就是Runway刚上线不久的,自定义AI模型,只需上传多角度的人物或者动物图片,系统即可生成系列的图像,首先点击“Train your own”选项。


159215a7956c2b4d9957cd61b8cd774e.jpeg


页面会出现3模型选项

由于这个功能是付费板块,感兴趣的同学们可以自行测试。


dfaef359a671666b77a2407b0ae0c3f3.jpeg

e1c1fadc4736ed05a9d641dff77d3526.jpeg


Infinite Image (无限延展扩图工具

这个功能通过简单的文本提示就可以把小图像无限联想扩展图像外生成更多扩展内容,首先点击“Infinite Image”选项。


3c545d09f39bb84e7a9548cf0e6fb469.jpeg


跳转到编辑界面


eab178eefefafd2b98506eb14bb8570b.jpeg


40726f129ebc5211f83ce055d8c351dc.jpeg


你可以在线进行局部修改,以及扩图。


3e67d4f3c5f4115cd28db775fa7119d8.jpeg


lmage Variation(图像变体工具)

这个功能可以基于单个原始图像自动生成多达四个图像变体。首先点击“lmage Variation”选项。


c28a1e5f4016d31848ec9ee348b9f7f2.jpeg


接着上传图片


07e3c9a6b3c2f0066963fcfb5f695ac3.jpeg


在右侧点击Generate即可生成图像


86254ec43d78986909413836c4d24c64.jpeg


(2)Edit images

除了图像生成技术外,Runway图像后期处理模块具有7个功能


b779a2be43ab4c474ffbce577e8105ac.jpeg


7552709b3cb72bc457bbcefe83379e60.jpeg


①Expand Image(扩展图像)

这个功能智能感知生成的填充将上传的图像扩展到新的纵横比。首先点击“Expand Image”选项。


d8fb0061bf41beb388ab61d3f7a8e05c.jpeg


接着上传视频


cb358c1d450a4f223e74756b08de0fc6.jpeg


然后可以在右侧输入框中填写图像扩展的内容,以及扩展尺寸设置,最后点击Generate生成。


b33ebc67c47ed7d5f62e055681c18721.jpeg


②Frame Interpolation(帧插值)

这个功能可以实现将一系列图像串在一起形成动画视频,首先点击“Frame Interpolation”选项。


f83d7cc1dd6271f95cedb5e6202eaa58.jpeg


接着上传多张图片,系统将会自动生成上传图像之间的平滑过渡,以创建流畅的视频结果,最后点击Generate即可生成动画视频。


044fa998fcf4adf3f4984dc08d5f7914.jpeg


③Erase and Replace(擦除和替换)

这个功能可以进行擦除不需要的局部内容,还可以通过文本进行修改生成。首先点击“Erase and Replace”选项。


5c87ae1284b2bec31cfd9c92cac92b61.jpeg


上传图片


d13db4801bfc6e030de7d7db9b1d0b1f.jpeg


接着在编辑界面中,用橡皮擦在图像中抹除不满意的部分,接着在对话框中输入提示词,系统就会按照提示词内容进行替换。


a9e60d39a85820134007f388caa7724b.jpeg


④Backdrop Remix(背景混合)

这个功能通过改变提示关键词重新混合生成任何AI图像的风格和构图,首先点击“Backdrop Remix”选项。


307b414aeb30b36bfcdcb1cefd11bb4c.jpeg

上传图片后,可以在右侧编辑界面中,输入提示词,或者应用系统的模板样式,即可生成新的图像。


0a19f4f6871ecdd5d770addf612c21fa.jpeg


⑤lmage Variation(图像变化)

这个功能跟Generate images中的lmage Variation一致的,这里就不重复赘述。

d4064dc7a4fc3ed81f84921063f2a509.jpeg

⑥Add color(添加颜色)

这个功能可以实现一键着色,将黑白图片立即修复,首先点击“Add color”选项。

6cd42bf3c7b7a98888142214b91d25a3.jpeg


上传图像后,即可点击Colorize进行着色。


1dff0ec20e1f964b477c444ff9ce13be.jpeg


⑦Upscale Image(图像智能修复)

这个功能可以理解为将图像从低分辨率转换为高分辨率,一键将模糊的图片瞬间变得高清,首先点击“Upscale Image”选项。


f6b57e07f5dcffed4a766d14d06245d2.jpeg


上传图片后,在右侧选项中勾选合适的分配率,支持720P/1080P/2K/4K


0cd191310c19fb409c94aca7a71a43f8.jpeg


192a320bc9123fc625877f2ef8450c58.jpeg


三、3D

Runway除了视频及图像生成技术外,还具有3D生成功能,分别为:


ea230fbf6b710170e36296376ca1e60c.jpeg


6fed55bc2008de07e3b07606838c4b26.jpeg


(1)3D Capture (3D捕捉)

这个功能可以将物体通过拍摄AI合并成3D场景

首先点击3D Capture


0f0f32dd48efd7e4897ee9d1a5833c6f.jpeg


跳转到新的页面,这里可以查看拍摄教程,掌握后,即可点击操作按钮,上传一个视频


0f6a2dc1f8e678198d32ab6fbc98f713.jpeg


视频拍摄指导教程

  • 围绕一个目标场景或对象。
  • 30秒或更长时间,1到3分钟最好
  • 禁用HDR
  • 选择具有高FPS的相机设置 (通常出现在慢动作模式下)
  • 缓慢移动相机以减少模糊
  • 接受普通和广角镜头视频

50975891a89e49141e24aa9909e38d0c.jpeg


视频上传后,即可在右侧名号好文件名称,即可点击Next - Train 3D Capture


d548ff5e707545c9bdee5f068a86d775.jpeg


(2)3D Texture(文生三维图)

这个功能可以通过文本描述生成3D图形,首先点击3D Texture。


87e37ca74df1014849809e76fe8779f9.jpeg


接着在对话框中输入提示词,点击Generate即可生成图像。


f955ce7611584f71bf49e2688bb57d74.jpeg


3D图像生成后,可以对右侧参数选项进行设置优化。


e5582543dc0a0441dabd003872ab7b69.jpeg


以上就是所有Runway功能点教程内容。


http://www.kler.cn/a/148640.html

相关文章:

  • Vue 的生命周期函数 和 Vuex
  • 设计模式之责任链模式(Chain Of Responsibility)
  • K8资源之endpoint资源EP资源
  • 【QT】QSS
  • java模拟键盘实现selenium上下左右键 table中的左右滚动条实现滚动
  • 【pytorch】常用强化学习算法实现(持续更新)
  • 学习MySQL先有全局观,细说其发展历程及特点
  • 学习笔记-瑞吉外卖项目实战(一)
  • 食谱菜谱大全API接口
  • 设计模式——RBAC 模型详解
  • 11.28
  • Scrapy爬虫异步框架之持久化存储(一篇文章齐全)
  • 在awk中 sub函数 和 gsub函数 的区别
  • Docker 运行 Oracle Autonomous Database Free Container
  • Android虚拟化
  • [机缘参悟-120] :计算机世界与佛家看世界惊人的相似
  • 数据提取PDF SDK的对比推荐
  • 443. 压缩字符串
  • 编程语言发展史:量子计算编程语言的应用和前景
  • 机器学习之决策树及随机森林
  • 吴恩达《机器学习》10-6-10-7:学习曲线、决定下一步做什么
  • 虚幻学习笔记6—摄像机控制
  • 外包干了2个月,技术退步明显了...
  • 基于Tomcat+Eclipse+Mysql开发的图书信息管理系统
  • pandas教程:MovieLens 1M Dataset MovieLens 1M数据集
  • HbuilderX 项目打包文件过大问题优化