商务服务
Jerry Davos大神教程:用IC灯光变换器重塑视频光照,背景随意换!
2024-09-16 15:59

最近,Jerry Davos大神在YouTube发布了最新教程,详细给大家讲解了如何使用 Comfy UI 来改变视频的光线效果,并且进行渲染。

工作流程概览

工作流程被巧妙地分成了几个小组,每个小组都有其独特的功能,从输入设置到输出保存,一目了然。

    输入设置:包括进入环设置和源视频设置。

    动画差异组:用于调整光线效果。

    合成组:IC 和光线映射的合成。

    案例采样器组:控制渲染图像的步数。

    细化器:提高渲染分辨率。

    提示输入:描述你的图像和新光线条件。

输入设置

这里有5个设置:

    采样器步骤:它决定了 KSampler 渲染图像所采取的总步骤数。它不应更改。[默认值26]

    细节增强器:它可增强最终渲染中的细微细节。[使用0.1至1之间的值]

    种子:它控制每个 KSampler 的世代种子。

    采样器 CFG:控制 KSampler 的 CFG 值。

    精炼升级:其作用类似于高分辨率修复值。[使用1.1–1.6可获得最佳效果]

提示输入

    正面提示:输入最能描述新灯光下图像的提示。

    负面提示:配置为提供最佳结果。请随意编辑。

    剪辑文本编码节点:它有助于对文本进行编码以最大程度地提高质量。将其保留为“完整”

模特和 Loras

    检查点:选择任何逼真的 SD1.5模型以获得准确的结果。选择任何 SD1.5模型以获得风格化结果。

    Loras:[可选] 如果需要,可以从列表中选择任何 loras。不要全力使用。使用0.5-0.7左右可获得最佳效果

基本设置解析

每个设置都有其作用,比如案例采样器步数决定了渲染图像的详细程度,细节增强器则提升最终渲染的小细节。

    种子:控制每次案例采样器的生成种子。

    细化器:类似于高分辨率修复,提升画质。

    提示输入:描述你的图像,系统已配置最佳结果。

模型与视频选择

选择你的 V 模型,无论是现实风格还是卡通风格,都可以。Loras 强度建议设置在50% 到70% 之间,以达到最佳效果。

视频上传与设置

上传你的源视频,注意文件大小不要超过100MB,时长控制在15到20秒内,以免内存不足。

光线映射视频

上传你的光线映射视频,确保其时长不短于源视频,否则会出错。

渲染设置

调整渲染分辨率,无论是风景还是肖像,最大分辨率都不会超过设定值。建议使用800到1200的值,以达到最佳效果。

光照贴图

    上传灯光图:点击并上传您想要的灯光图视频。

    它将自动缩放到源视频的尺寸

    确保它长于或等于源视频的尺寸,否则会出现错误。

    Light Map ControlNet:此光照图也用作使用此模型的Light controlnet

    使用基于光线的控制网络模型,注意 CN 强度值不要过高,以免过曝或光线过渡过于锐利。

动画差异

    加载 Animatediff 模型:您可以使用任何模型来获得不同的效果。

    Animatediff 其他节点:您需要对 animatediff 有一些了解才能更改其他设置 [ 您可以在这里找到它们]

    设置 SMZ:这是用于提高模型管道质量的节点,所有设置都已预定义以便运行良好。

光照图和 IC 调节的组成

上面的顶部调整节点(灰色)用于控制 IC 光调节的调节,以降低对比度和控制亮度。

生成新背景:禁用时,它将原始图像输入并尝试根据“背景提示”(如果在肯定提示框中存在)映射与源视频背景类似的细节

[1girl、阳光、日落、白衬衫、黑色短裤、室内、房间]

当启用生成新背景时:它将根据深度生成新背景

[1女孩,阳光,日落,背景中的自然风光,天空]

此外,深度控制网的强度和结束百分比降低至45%,以在背景中形成开放区域。

    顶部光照图:当为 True 时,光照图将位于源视频的顶部,并且更占主导地位;当为 False 时,源将位于顶部,更占主导地位且更亮

    主题影响区域:2种混合模式效果最佳

根据顶部或底部的光照图使阴影区域变暗。

它会根据顶部或底部的光照图来增亮阴影区域

混合因子用于强度。

整体调整:这将从上方控制最终处理的光图的亮度、对比度、伽马和色调。

图像重映射:使用此节点控制整个图像的整体亮度和暗度。

    最小值越高,场景越亮

    较低的最大值将使场景变暗,并可以将较亮的区域转换为变形对象,如 QrCode Monster CN

    通常使用最小值0.1或0.2来稍微照亮场景。

    最小值为0时,光照贴图的黑色像素将呈现漆黑阴影。

KSamplers(原始和精炼)

IC Raw Ksampler:与其他采样器不同,由于 IC-Light 条件,它从第8步开始而不是从零开始(帧从第8步开始去噪)

例如,结束步骤20

开始步骤于

    0将没有光照贴图效果。

    5的效果为50%

    10则效果为100%

    因此,大约3-8是一个很好的测试值。

当生成新背景为 TRUE 时,你可以将值设置为低于5以获得更好的结果

Ksampler Refine:它的工作原理类似于 IC 原始采样后的 Img2Img Refiner。

对于25的结束步骤

开始步骤于

    10及以下版本将像原始采样器一样工作,并会为您提供变形对象

    15可以像真正的精炼机一样工作

    20无法正常工作

    超过20及以上会产生混乱的结果

    因此,默认16是好的。

面部修复

    升级以修复脸部:如果修复脸部后您的脸部不满意,您可以将其升级到大约1.2到1.6以获得更好的脸部。

    正面提示:您可以在此处输入面部提示。默认设置为“微笑”。您可以更改它。

    面部去噪:使用0.35–0.45左右。在较高的面部上可能会出现渲染不正确的情况,并且还可能出现滑动面部问题。

保存

当所有帧渲染完成后,它们将被导出到 Comfy UI 目录的输出文件夹中。你可以调整输出位置,甚至批量渲染更长的视频。

高级技巧

如果你愿意,可以使用 Comfy Cloud2来运行这个工作流程,它有专门的工作流程页面,所有文档都齐全,一键运行,无需安装任何节点或模型。

工作流地址:

https://drive.google.com/drive/folders/16Aq1mqZKP-h8vApaN4FX5at3acidqPUv

在 RunComfy 中运行此工作流而无需设置:

https://www.runcomfy.com/comfyui-workflows/comfyui-ic-light-workflow-for-video-relighting

视频原地址:https://www.youtube.com/watch?v=q__YTKxtQAE

文章转载自:业界 非本站原创

    以上就是本篇文章【Jerry Davos大神教程:用IC灯光变换器重塑视频光照,背景随意换!】的全部内容了,欢迎阅览 ! 文章地址:http://sh_aka.glev.cn/news/286.html 
     资讯      企业新闻      行情      企业黄页      同类资讯      首页      网站地图      返回首页 歌乐夫资讯移动站 http://lzlz0618.glev.cn/ , 查看更多   
最新新闻
恒指期货mt4(恒指期货一手保证金和手续费)
期货没有平仓会怎么样?开仓是按照固定的盈亏比例收取的,平仓和平仓就是按照开仓的手数,有些品种是按照成交金额的比例收取,有些品
【2022年】宇崎学妹想要玩 第二季 资讯情报整合【MCE汉化组】(更新中)
大学三年级的樱井真一有个缠着他的烦人学妹。虽然被“宇崎学妹”也就是宇崎花耍得团团转,但是暑假过得也很充实……但是宇崎学妹
国外期货平台排名(国外期货app十大排行榜)
国外期货平台排名(国外期货App十大排行榜)随着全球期货市场的不断发展和,越来越多的投资者开始关注国外期货市场。为了方便投资
期货合约交割前平仓什么意思(期货合约交割前平仓什么意思啊)
什么是期货合约平仓?期货合约平仓是指在合约到期前,通过与之前持有的期货合约数量和方向相反的交易来对冲已持有的头寸,从而结
玉石成分 玉石里面含有什么矿物质?
今天给各位分享玉石成分的知识,其中也会对玉石成分进行解释,如果能碰巧解决你现在面临的问题,别忘了关注本站,现在开始吧!1
美国道琼斯指数期货每日成交金额
外汇平台(外汇平台哪家好)分类标准1.监管标准:国家监管机构外汇平台的监管,监管范围包括国家法律法规,国家法律法规,经济政策等;2
买涨买跌交易平台(480秒买涨买跌交易平台)
美原油期货交易怎么开户呢?下面小编为大家介绍一下开户方式,以供参考。在交易过程中,因为手续费成本高,所以我们交易一手,那么只
期货销户可以跨地区(期货账户销户流程)
期货销户可以跨地区(期货账户销户流程)在期货市场,投资者可能会碰到一些情况,需要进行期货销户。期货销户是指投资者主动申请
螺纹钢期货行情网 螺纹钢期货走势分析及螺纹钢建议
螺纹钢行情网 螺纹钢期货走势分析及螺纹钢建议:行情判断:周线收阳,均线区间震荡运行,MACD指标零轴上方区域粘合。后期需求暂稳,供
期货行情数据接口
期货行情数据接口分为两种,第一种是期货行情的数据接口,第二种是期货行情的数据接口。有的期货软件还提供网上期货行情数据接口,
本企业新闻