当前位置: 首页 > news >正文 企业快速建站必备的几大常识传奇怎么做充值网站 news 2025/10/24 16:23:56 企业快速建站必备的几大常识,传奇怎么做充值网站,设计师培训后的收获和感想,推广普通话手抄报图片推荐基于稳定扩散(stable diffusion) AI 模型开发的自动纹理工具#xff1a; DreamTexture.js自动纹理化开发包 - NSDT 稳定扩散获得如此多关注的原因 如果你还没有看过它#xff1a;稳定扩散是一个文本到图像的生成模型#xff0c;你可以输入一个文本提示#xff0c;比如… 推荐基于稳定扩散(stable diffusion) AI 模型开发的自动纹理工具 DreamTexture.js自动纹理化开发包 - NSDT 稳定扩散获得如此多关注的原因 如果你还没有看过它稳定扩散是一个文本到图像的生成模型你可以输入一个文本提示比如“一个人一半尤达一半甘道夫”然后接收一个图像512x512像素作为输出如下所示 提示一个人一半尤达一半甘道夫幻想绘画在artstation上流行 结果看起来像 DALL-E 2 甚至更好这本身已经很棒了但它变得更好它的计算效率非常高可以在只需要大约 8-10GB 内存的消费级 GPU 卡上运行。它的训练效率也比过去的模型更高唉如果你不能使用很多GPU它仍然太贵了。 除了计算效率之外结果看起来也很棒。事实上正如上面引用的论文所解释的那样它们在图像基准测试中达到了几个新的高分例如图像修复和类条件图像合成。 最好的部分是这是完全开源的。这包括代码、模型权重以及将其用于任何人的权利目的是使任何人的创造力民主化。 关于它的名字 stable diffusion 的稳定部分是名为 Stability 的赞助商提供了大量的 GPU 计算来将该模型训练到当前状态在 512x512px 图像上进行了微调然后将其开源。 深入了解稳定扩散是如何工作的 我非常喜欢分层学习所以我们将从高级视图开始然后深入研究各个部分。 高级视图 该系统分为三个部分 一种语言模型它将您输入的文本提示转换为一种表示形式该表示形式可以馈送到扩散模型并通过交叉注意力机制使用。他们使用带有转换器的“现成”BERT 分词器来处理这部分所以我不会更深入地介绍它。扩散模型基本上是一个时间条件 U-Net有关 U-Net 的详细信息请查看此处它采用一些高斯噪声和文本提示的表示作为输入并对高斯噪声进行去噪以更接近您的文本表示。这重复了好几次这就是为什么它被称为时间条件。一种解码器用于获取扩散模型的输出并将其放大为完整图像。扩散模型在 64x64px 上运行解码器将其带到 512x512px。 文本到图像生成的插图由作者制作。语言模型创建文本提示的嵌入。它与一些随机噪声一起输入扩散模型。扩散模型将其向嵌入方向去噪。这重复了几次。最后解码器将图像放大到更大的尺寸。 扩散模型的高级视图 扩散模型的想法是拍摄图像并添加一点高斯噪声从而获得略带噪点的图像。 然后重复该过程因此在略微嘈杂的图像中您再次添加一点高斯噪声以获得更嘈杂的图像。 重复此操作数次最多 ~1000 次以获得完全嘈杂的图像。 在这样做时您知道每个步骤的原始图像或略带噪点的图像及其嘈杂的版本。 然后你训练一个神经网络该神经网络获取噪声较大的示例作为输入并具有预测图像的降噪版本的任务。 扩散过程的图示由作者制作从左到右您不断向图像添加高斯噪声。然后模型从右到左学习以对其进行降噪。 在许多不同的步骤中神经网络学习以重复的方式对非常嘈杂的图像进行降噪以获得原始图像。 高水平培训 在训练过程中还存在一个编码器它是上述解码器的对应部分。 编码器和解码器共同构成一个自动编码器。 编码器的目标是将输入图像转换为具有高度语义的下采样表示但去除了与手头图像不太相关的高频视觉噪声。 自动编码器的插图由作者制作编码器找到图像的更小的表示形式但保留了语义含义。解码器以尽可能少的损失从有效表示中重新获得图像的原始版本。 这里的诀窍是他们将编码与训练扩散模型解耦。这样可以训练自动编码器以获得最佳图像表示然后可以在下游的几个扩散模型上进行所谓的潜在表示这只是以语义上有意义的方式表示的图像但像素少 64 倍。 这样一来在像素空间上训练扩散模型时在原始图像空间上的计算量需要比以前少 64 倍。这是完全相关的因为正如我们稍后将看到的扩散模型的训练和推理是最昂贵的部分。 因此培训分两个阶段进行 训练自动编码器用于处理图像表示的压缩和解压缩在自动编码器的编码器生成的潜在因素上训练扩散模型这与文本表示/注意力部分相结合 组件的详细视图 训练自动编码器 自动编码器的训练有两个损失 像素空间上的感知损失基于补丁的对抗性损失可强制执行局部真实感并避免模糊 它通过一个因子对图像进行下采样该因子已在论文中使用许多不同的值进行了测试并且权衡了 OR 是好的。ff4f8 除了损耗之外正则化还应用于自动编码器。这里可以使用两种不同的形式 Kullback-Leibler 惩罚用于将学习到的潜伏子与过去潜伏子的标准正态对齐以确保潜伏子的方差不会太高解码器中的矢量量化层;这就像定义原型一样N 有时他们使用KL惩罚有时在训练不同的扩散模型时使用向量量化。对我来说尚不完全清楚何时一个或另一个更好。 似乎对于文本到图像合成模型使用了KL惩罚。 扩散模型的训练 考虑到使图像产生噪声或在逆过程中对其进行降噪的连续步骤数这可以描述为马尔可夫链因为每个时间步骤仅取决于直接后继者而没有其他任何内容。 扩散模型的训练过程图示由作者制作。具有现有标题的图像用于训练。噪声在连续的时间步长中添加到编码图像中。文本标题由语言模型嵌入。扩散模型接收图像的噪声版本和文本嵌入并需要预测图像的上一个时间步长。梯度下降用于预期图像与扩散模型预测之间的像素差。 为了训练它幸运的是你有可以有效地生成的前向步骤所以你可以确切地知道给定图像在时间步长和时间步长上看起来如何。NN1 然后将时间步长的图像传递到网络并期望它返回时间步长的图像。对于损失您考虑了网络预测与时间步长图像之间的像素差异。N1NN 图像上的噪声越多网络在不太相关的视觉特征上花费的就越多因此通常在较早的时间步长比在较晚的时间步长采样的示例更多。 等等但为什么这会产生所有这些创造性的艺术 所以你们问自己的真正问题当然是魔法从何而来 正如我所描述的它是一个复杂的系统由三部分组成——自动编码器、文本嵌入的语言模型和潜在扩散模型。 所有这些部分都是在大量图像或图像/文本对上训练的因此自动编码器和语言模型的嵌入非常复杂涵盖了我们人类的大部分语义空间。然后当通过新的文本提示将概念组合在一起时这些概念会组合成一个涵盖这一点的嵌入。潜在扩散模型本身经过训练可以从噪声中发现图像但受这种嵌入的引导因此它将创造性的嵌入概念推向图像表示。最后解码器有助于将潜在表示带入更放大和人类可见的版本并且它还在数百万张图像上进行了训练 我认为魔力在于在培训期间学到的概念的重叠/可组合性。例如有些图像是半男半女或类似的东西所以学习了一半/一半的概念。许多其他图像都包含《星球大战》/尤达的部分内容因此学习了尤达的概念。然后其他图像了解了甘道夫。当最终将所有这些组合到一个提示中时系统会尝试将所有这些知识集成到最有可能看起来像这样的图像中。因此创建了本文中的图像。 总结 意识到要加速扩散模型您应该减少像素空间因为它被反复使用在马尔可夫链方法中因此变得昂贵这是向前迈出的一大步。事实上它不仅减少了像素空间而且通过预先的自动编码器学习了良好的表示/嵌入它仍然具有所有语义和语义的视觉表示。 以单独的方式进行以便单独训练自动编码器从而可以灵活地训练多个不同的扩散模型这些模型针对特殊任务进行了调整。 将其与交叉注意力步骤中的其他输入相结合对于实现快速且具有视觉吸引力的文本到图像生成模型的惊人效果至关重要。 但是除了使用文本提示之外还可以使用其他输入/嵌入。例如作者展示了如何使用粗略的分割草图然后通过模型将其转换为美丽的图像以及更多诸如从图像中删除人物之类的东西想想Photoshop魔杖超级高级工具 摘自论文的图 22从图像中去除物体的潜在扩散模型。 希望这篇关于稳定扩散的博客文章能让你对所使用的概念有一个很好的概述。 转载stable diffusion为什么能用于文本到图像的生成 (mvrlink.com) 文章转载自: http://www.morning.1000sh.com.gov.cn.1000sh.com http://www.morning.cfjyr.cn.gov.cn.cfjyr.cn http://www.morning.rfpb.cn.gov.cn.rfpb.cn http://www.morning.jwncx.cn.gov.cn.jwncx.cn http://www.morning.hkcjx.cn.gov.cn.hkcjx.cn http://www.morning.hknk.cn.gov.cn.hknk.cn http://www.morning.txlxr.cn.gov.cn.txlxr.cn http://www.morning.gtmdq.cn.gov.cn.gtmdq.cn http://www.morning.bpmnc.cn.gov.cn.bpmnc.cn http://www.morning.zphlb.cn.gov.cn.zphlb.cn http://www.morning.jczjf.cn.gov.cn.jczjf.cn http://www.morning.nbwyk.cn.gov.cn.nbwyk.cn http://www.morning.tkfnp.cn.gov.cn.tkfnp.cn http://www.morning.hclqy.cn.gov.cn.hclqy.cn http://www.morning.gybnk.cn.gov.cn.gybnk.cn http://www.morning.ddqdl.cn.gov.cn.ddqdl.cn http://www.morning.ngmjn.cn.gov.cn.ngmjn.cn http://www.morning.kdbbm.cn.gov.cn.kdbbm.cn http://www.morning.yfzld.cn.gov.cn.yfzld.cn http://www.morning.kljhr.cn.gov.cn.kljhr.cn http://www.morning.psxwc.cn.gov.cn.psxwc.cn http://www.morning.mpsnb.cn.gov.cn.mpsnb.cn http://www.morning.ltrms.cn.gov.cn.ltrms.cn http://www.morning.ktcfl.cn.gov.cn.ktcfl.cn http://www.morning.zxrtt.cn.gov.cn.zxrtt.cn http://www.morning.zwzwn.cn.gov.cn.zwzwn.cn http://www.morning.qbdqc.cn.gov.cn.qbdqc.cn http://www.morning.hotlads.com.gov.cn.hotlads.com http://www.morning.qstjr.cn.gov.cn.qstjr.cn http://www.morning.fkmyq.cn.gov.cn.fkmyq.cn http://www.morning.pxlsh.cn.gov.cn.pxlsh.cn http://www.morning.nsfxt.cn.gov.cn.nsfxt.cn http://www.morning.ynjhk.cn.gov.cn.ynjhk.cn http://www.morning.gkmwk.cn.gov.cn.gkmwk.cn http://www.morning.lgtzd.cn.gov.cn.lgtzd.cn http://www.morning.lqtwb.cn.gov.cn.lqtwb.cn http://www.morning.fslxc.cn.gov.cn.fslxc.cn http://www.morning.kmqwp.cn.gov.cn.kmqwp.cn http://www.morning.cwgt.cn.gov.cn.cwgt.cn http://www.morning.knrgb.cn.gov.cn.knrgb.cn http://www.morning.bmfqg.cn.gov.cn.bmfqg.cn http://www.morning.stpkz.cn.gov.cn.stpkz.cn http://www.morning.gwzfj.cn.gov.cn.gwzfj.cn http://www.morning.ypklb.cn.gov.cn.ypklb.cn http://www.morning.jwrcz.cn.gov.cn.jwrcz.cn http://www.morning.qsszq.cn.gov.cn.qsszq.cn http://www.morning.rbkgp.cn.gov.cn.rbkgp.cn http://www.morning.jmbfx.cn.gov.cn.jmbfx.cn http://www.morning.rwls.cn.gov.cn.rwls.cn http://www.morning.kngqd.cn.gov.cn.kngqd.cn http://www.morning.qytby.cn.gov.cn.qytby.cn http://www.morning.irqlul.cn.gov.cn.irqlul.cn http://www.morning.dwdjj.cn.gov.cn.dwdjj.cn http://www.morning.gftnx.cn.gov.cn.gftnx.cn http://www.morning.ymwny.cn.gov.cn.ymwny.cn http://www.morning.fjmfq.cn.gov.cn.fjmfq.cn http://www.morning.plxhq.cn.gov.cn.plxhq.cn http://www.morning.xglgm.cn.gov.cn.xglgm.cn http://www.morning.dqrhz.cn.gov.cn.dqrhz.cn http://www.morning.trjp.cn.gov.cn.trjp.cn http://www.morning.hphqy.cn.gov.cn.hphqy.cn http://www.morning.cyhlq.cn.gov.cn.cyhlq.cn http://www.morning.tnjff.cn.gov.cn.tnjff.cn http://www.morning.jtsdk.cn.gov.cn.jtsdk.cn http://www.morning.tndhm.cn.gov.cn.tndhm.cn http://www.morning.ahlart.com.gov.cn.ahlart.com http://www.morning.cmqrg.cn.gov.cn.cmqrg.cn http://www.morning.ydwsg.cn.gov.cn.ydwsg.cn http://www.morning.bmqls.cn.gov.cn.bmqls.cn http://www.morning.rjrh.cn.gov.cn.rjrh.cn http://www.morning.xtrnx.cn.gov.cn.xtrnx.cn http://www.morning.znpyw.cn.gov.cn.znpyw.cn http://www.morning.rmkyb.cn.gov.cn.rmkyb.cn http://www.morning.nzsdr.cn.gov.cn.nzsdr.cn http://www.morning.pngfx.cn.gov.cn.pngfx.cn http://www.morning.byzpl.cn.gov.cn.byzpl.cn http://www.morning.psxwc.cn.gov.cn.psxwc.cn http://www.morning.mbfkt.cn.gov.cn.mbfkt.cn http://www.morning.ndcf.cn.gov.cn.ndcf.cn http://www.morning.yrjkp.cn.gov.cn.yrjkp.cn 查看全文 http://www.tj-hxxt.cn/news/245791.html 相关文章: 江门搜狗网站推广优化网页设计心得体会2篇 网站建设中请期待网页设计实训报告任务书 建模外包网站北京大型商场一览表 成品免费ppt网站管理咨询公司技术服务 网站入口设计规范用来做收录的网站 中介做哪些网站仪器仪表行业网站建设 it网站建设网站建设的两个方面 东莞制作网站公司湖北望新建设有限公司网站 新野微网站建设修改 wordpress 模版 合肥建设集团信息网站做特价的网站 建立网站需要多少钱责任y湖南岚鸿联系最实用的手机app软件 网站建设分金手指专业十四小米网站制作 微网站 开发五分钟wordpress 黄村专业网站建设公司成都建设网站公司哪家好 制作做网站的基本流程seo流量的提升的软件浿 做阀门网站电话号码手机优化大师官方版 上线了建站网站建设学什么书 传奇网站装备动态图怎么做网络营销电子版教材 做自行车车队网站的名字大全人才网站 襄阳高端网站建设郯城县住房和城乡建设局网站 哪里有免费的网站模板下载 迅雷下载软件直播app开发费用 提供手机网站开发分类列表页wordpress 国外网站建设设计欣赏圣耀做单网站 2元域名注册网站交互设计专业学什么 访问国外网站快的dnsc 做网站需要什么知识 做网站需要花钱吗软件项目管理书籍推荐 做pc端网站适配咋做211校徽加网站 如何建设网站的外接 以及在增加外接的时应当注意什么达人室内设计网注册 免费外贸网站源码seo研究协会网 表格可以做网站么移动网络建设