首页 > 业界 > 关键词  > AI会员教程最新资讯  > 正文

Jerry Davos大神教程:用IC灯光变换器重塑视频光照,背景随意换!

2024-07-12 11:18 · 稿源:站长之家

最近,Jerry Davos大神在YouTube发布了最新教程,详细给大家讲解了如何使用 Comfy UI 来改变视频的光线效果,并且进行渲染。

安装与准备

首先,你需要下载Jerry Davos大神的工作流程文件,链接在文末。下载后,直接拖入 Comfy UI 中,它会提示你缺少的节点。别担心,使用管理器一键安装,简单快捷。

如果安装过程中遇到问题,Jerry Davos大神也提供了帮助链接,点击即可获得解决方案。以下是Jerry Davos大神详细教程:

工作流程概览

工作流程被巧妙地分成了几个小组,每个小组都有其独特的功能,从输入设置到输出保存,一目了然。

  • 输入设置:包括进入环设置和源视频设置。

  • 动画差异组:用于调整光线效果。

  • 合成组:IC 和光线映射的合成。

  • 案例采样器组:控制渲染图像的步数。

  • 细化器:提高渲染分辨率。

  • 提示输入:描述你的图像和新光线条件。

输入设置

image.png

这里有5个设置:

  • 采样器步骤:它决定了 KSampler 渲染图像所采取的总步骤数。它不应更改。[默认值26]

  • 细节增强器:它可增强最终渲染中的细微细节。[使用0.1至1之间的值]

  • 种子:它控制每个 KSampler 的世代种子。

  • 采样器 CFG:控制 KSampler 的 CFG 值。

  • 精炼升级:其作用类似于高分辨率修复值。[使用1.1–1.6可获得最佳效果]

提示输入

image.png

  • 正面提示:输入最能描述新灯光下图像的提示。

  • 负面提示:配置为提供最佳结果。请随意编辑。

  • 剪辑文本编码节点:它有助于对文本进行编码以最大程度地提高质量。将其保留为“完整”

模特和 Loras

image.png

  • 检查点:选择任何逼真的 SD1.5模型以获得准确的结果。选择任何 SD1.5模型以获得风格化结果。

  • Loras:[可选] 如果需要,可以从列表中选择任何 loras。不要全力使用。使用0.5-0.7左右可获得最佳效果

基本设置解析

每个设置都有其作用,比如案例采样器步数决定了渲染图像的详细程度,细节增强器则提升最终渲染的小细节。

  • 种子:控制每次案例采样器的生成种子。

  • 细化器:类似于高分辨率修复,提升画质。

  • 提示输入:描述你的图像,系统已配置最佳结果。

模型与视频选择

选择你的 V 模型,无论是现实风格还是卡通风格,都可以。Loras 强度建议设置在50% 到70% 之间,以达到最佳效果。

视频上传与设置

image.png

上传你的源视频,注意文件大小不要超过100MB,时长控制在15到20秒内,以免内存不足。

光线映射视频

上传你的光线映射视频,确保其时长不短于源视频,否则会出错。

渲染设置

调整渲染分辨率,无论是风景还是肖像,最大分辨率都不会超过设定值。建议使用800到1200的值,以达到最佳效果。

光照贴图

image.png

  • 上传灯光图:点击并上传您想要的灯光图视频。

  • 它将自动缩放到源视频的尺寸

  • 确保它长于或等于源视频的尺寸,否则会出现错误。

  • Light Map ControlNet:此光照图也用作使用此模型的Light controlnet

  • 使用基于光线的控制网络模型,注意 CN 强度值不要过高,以免过曝或光线过渡过于锐利。

动画差异

image.png

  • 加载 Animatediff 模型:您可以使用任何模型来获得不同的效果。

  • Animatediff 其他节点:您需要对 animatediff 有一些了解才能更改其他设置 [ 您可以在这里找到它们]

  • 设置 SMZ:这是用于提高模型管道质量的节点,所有设置都已预定义以便运行良好。

光照图和 IC 调节的组成

上面的顶部调整节点(灰色)用于控制 IC 光调节的调节,以降低对比度和控制亮度。

生成新背景:禁用时,它将原始图像输入并尝试根据“背景提示”(如果在肯定提示框中存在)映射与源视频背景类似的细节

[1girl、阳光、日落、白衬衫、黑色短裤、室内、房间]

当启用生成新背景时:它将根据深度生成新背景

[1女孩,阳光,日落,背景中的自然风光,天空]

此外,深度控制网的强度和结束百分比降低至45%,以在背景中形成开放区域。

  • 顶部光照图:当为 True 时,光照图将位于源视频的顶部,并且更占主导地位;当为 False 时,源将位于顶部,更占主导地位且更亮

  • 主题影响区域:2种混合模式效果最佳

根据顶部或底部的光照图使阴影区域变暗。

它会根据顶部或底部的光照图来增亮阴影区域

混合因子用于强度。

整体调整:这将从上方控制最终处理的光图的亮度、对比度、伽马和色调。

图像重映射:使用此节点控制整个图像的整体亮度和暗度。

  • 最小值越高,场景越亮

  • 较低的最大值将使场景变暗,并可以将较亮的区域转换为变形对象,如 QrCode Monster CN

  • 通常使用最小值0.1或0.2来稍微照亮场景。

  • 最小值为0时,光照贴图的黑色像素将呈现漆黑阴影。

KSamplers(原始和精炼)

IC Raw Ksampler:与其他采样器不同,由于 IC-Light 条件,它从第8步开始而不是从零开始(帧从第8步开始去噪)

例如,结束步骤20

开始步骤于

  • 0将没有光照贴图效果。

  • 5的效果为50%

  • 10则效果为100%

  • 因此,大约3-8是一个很好的测试值。

当生成新背景为 TRUE 时,你可以将值设置为低于5以获得更好的结果

Ksampler Refine:它的工作原理类似于 IC 原始采样后的 Img2Img Refiner。

对于25的结束步骤

开始步骤于

  • 10及以下版本将像原始采样器一样工作,并会为您提供变形对象

  • 15可以像真正的精炼机一样工作

  • 20无法正常工作

  • 超过20及以上会产生混乱的结果

  • 因此,默认16是好的。

面部修复

  • 升级以修复脸部:如果修复脸部后您的脸部不满意,您可以将其升级到大约1.2到1.6以获得更好的脸部。

  • 正面提示:您可以在此处输入面部提示。默认设置为“微笑”。您可以更改它。

  • 面部去噪:使用0.35–0.45左右。在较高的面部上可能会出现渲染不正确的情况,并且还可能出现滑动面部问题。

保存

当所有帧渲染完成后,它们将被导出到 Comfy UI 目录的输出文件夹中。你可以调整输出位置,甚至批量渲染更长的视频。

高级技巧

如果你愿意,可以使用 Comfy Cloud2来运行这个工作流程,它有专门的工作流程页面,所有文档都齐全,一键运行,无需安装任何节点或模型。

工作流地址:

https://drive.google.com/drive/folders/16Aq1mqZKP-h8vApaN4FX5at3acidqPUv

在 RunComfy 中运行此工作流而无需设置:

https://www.runcomfy.com/comfyui-workflows/comfyui-ic-light-workflow-for-video-relighting

视频原地址:https://www.youtube.com/watch?v=q__YTKxtQAE

举报

  • 相关推荐
  • 再获认可!腾讯云凭借NDR入选Forrester最新研报

    国际权威机构Forrester发布《网络分析与可见性解决方案报告》,腾讯云凭借旗下NDR产品在威胁检测、自动化响应等方面的优势连续第二年入选。报告指出,随着数字化转型深入,企业面临东西向流量攻击、AI驱动攻击等新型威胁,NAV解决方案能提供全网流量实时洞察,快速发现威胁。腾讯云NDR具备检测场景全、响应快、阻断率高等优势,覆盖公有云和线下机房全流量检测,支持2000余项漏洞检测,并采用AI算法提升威胁发现能力。报告建议企业根据规模选择合适的NAV供应商,腾讯云以"云原生接入、全流量检测、全流量可视"三大创新突破,助力企业构建高级威胁防护能力。

  • 声音革命!逗哥配音以独家达人声库重塑短视频创作新生态

    国内领先的智能配音平台"逗哥配音"推出全新升级的"臻品达人声库",通过动态扩容的独家声音资源和精准的风格适配能力,帮助短视频创作者提升内容吸引力。数据显示,使用该功能的短视频播放量达行业基准值的1.8倍。平台采用"数据优选+专业打磨"模式,精选超10亿播放量验证的顶级解说者资源,每季度新增20+达人声线,覆盖影视解说、游戏、好物推荐等20余个垂直领域。独创的"声效数据库"提供3000余种场景化音效模板,实现一键匹配专业级声场。某品牌营销案例中,创作者使用专属声线将产品视频转化率提升至15.7%。目前平台已覆盖微信小程序、PC端及移动APP全平台,支持80种语言实时转换。

  • StarRocks 优化实践:揭秘毫秒级实时分析的三大核心技术

    StarRocks是一款高性能实时分析数据库,通过三大核心技术解决海量数据分析难题:1)向量化执行引擎,采用批处理方式减少CPU开销,支持SIMD指令集加速计算;2)CBO优化器,基于统计信息智能选择最优执行计划,支持复杂查询改写和物化视图优化;3)列式存储结构,结合稀疏索引和Bitmap索引提升I/O效率。其企业级产品镜舟数据库在此基础上增强多租户隔离、RBAC权限控制等特性

  • 1400万播放背后:AI如何重塑短视频内容生产

    在短视频赛道上,AI不只是加速器,也正在成为内容创作者的“第二大脑”。本文聚焦两个真实案例: 一个是治愈系图文短视频的爆款制造,团队用AI实现选题拆解、图像生成、配音剪辑等全流程提效,仅靠1人操作,即打造出播放量高达1400万的作品;另一个则是“包租婆”IP的虚拟形象再造,通过AI驱动的形象生成与语音合成,强化角色记忆点,轻量化制作节奏拉满。 这些案例�

  • itc保伦股份“AI教育3.0·智慧教育新纪元”线上推介会圆满举办,以科技之光照亮教育未来!

    ITC保伦股份举办"AI教育3.0·智慧教育新纪元"线上推介会,发布三大AI教育解决方案:1)智慧教学方案通过AI重构课堂,实现声学环境优化、课堂行为洞察等功能;2)智慧操场方案运用机器视觉技术,实现运动姿态分析、成绩智能判定;3)平安校园方案构建三维立体防护网络,实现智能监控与语音预警。活动吸引4.5万人次观看,专家陈晓华指出AI教育需强化技术创新、数据安全和教师培训。ITC将持续深耕"AI+教育"领域,推动教育信息化高质量发展。

  • 微云全息(NASDAQ: HOLO)引领区块链边缘存储与计算革命,重塑数据安全与可信度

    文章探讨了区块链技术在边缘存储/计算领域的应用。当前边缘存储系统存在数据流通机制缺陷,导致设备间数据共享困难。微云全息提出基于区块链的解决方案,通过将数据存储在靠近数据源的边缘设备上,减少传输延迟和网络拥堵。该系统利用区块链的去中心化、不可篡改特性确保数据安全,并通过智能合约管理数据访问和交换规则。架构包含边缘节点、区块链网络、智能合约和数据存储四部分,实现分布式存储计算功能。该方案能有效解决物联网等场景下大数据传输慢、实时性差的问题,同时保障数据安全性和真实性。

  • 新品发布 | 纳祥科技新推出I2S AB类数字耳放IC NX4919

    纳芯微电子推出的NX4919是一款高性能I2S数字AB类双声道音频功放芯片,具有以下特点:采用四阶Multi-Bit ΔΣ调制器,支持24位D/A转换;工作电压3.3V-5.0V;自动检测采样率最高192KHz;105dB动态范围;THD+N<0.1%;输出功率140mW(16Ω)/80mW(32Ω);内置数字去加重模块和多种滤波器;支持主流音频格式;采用QFN28封装,外围电路简单。适用于WIFI音箱、智能播放设备等场景,具有高保真、低功耗、小体积等优势。

  • 开展倒计时!itc保伦股份邀您共赴2025年广州国际专业灯光、音响展览会

    2025年广州国际专业灯光音响展览会将于5月27-30日在中国进出口商品交易会展馆举行。作为全球规模最大的专业视听展会之一,本届展会面积达29万平方米,设立30大主题展馆,预计吸引超2000家全球知名品牌参展。展会涵盖专业音响、灯光设备、舞台技术、智能显示等全产业链产品,展示行业前沿技术和创新成果。ITC保伦股份将参展并带来"生态融合,聚势前行"主题展示,呈现声光电电视讯管控平台、LED大屏显示系统等创新产品。展会期间还将举办多场专业论坛和技术交流会。观众可通过地铁8号线或公交线路前往展馆,周边推荐威斯汀酒店等住宿选择。

  • 用友毕思建:以AI客户成功体系重塑客户价值

    用友37年来坚持"以客户为中心"理念,在AI时代推出全新企业AI战略。基于BIP数智商业创新平台,用友构建了76个AI Agent组成的智能交付和运营体系,覆盖YonSuite全业务流程。通过智能客服机器人"友小成"和交付机器人"友小施",实现83.65%和87.3%的独立接待率。同时推出BIP运营师认证体系,培养企业数字化内生力量。该体系通过AI+业务深度融合,助力企业从传统服务向自主驾驶模式转型,降低数字化成本,构建持续领先的客户生态。用友正以AI智能交付+运营的创新模式,重塑客户价值,引领行业迈向智能化新阶段。

  • 沐光发布全屋健康智能灯光系统,两大技术革新开启健康照明 2.0 时代

    近日,"设计上海2025"盛会在沪落幕,30多个国家和地区的600余个品牌参展,呈现前沿设计理念。无主灯品牌沐光发布全屋健康智能灯光系统,开启健康照明2.0时代。沐光与同济大学共建智慧健康光环境实验室,针对不同人群研发健康光标准。其核心技术包括紫光激发自然光谱技术和MOS健康光动态拟合技术,实现98%太阳光谱相似度。沐光推出三大健康光方案:视觉健康光�