打造神奇宝贝新世界 Diffusion 大神微调 无敌了 Stable 生成式 AI (打造神奇宝贝的小说)
作为一个强大、公开且足够简单的模型，最近大火的 Stable Diffusion 在文本生成图像之外，给了大家无限的创作可能性。
最近，来自 Lambda Labs 的机器学习研究员 Justin Pinkney 对该模型进行了微调，构建了一个神奇宝贝生成器！
下图是输入名字后生成的一些神奇宝贝：戴珍珠耳环的少女、奥巴马、特朗普、鲍里斯·约翰逊、龙猫、Hello Kitty。
Lady Gaga、鲍里斯·约翰逊、普京、默克尔、特朗普、柏拉图：
除了现有的角色和公共人物，你还可以输入一个描述来生成自己想象的神奇宝贝：骷髅祭司
你也可以输入自己的姓名或网名，生成属于自己的神奇宝贝形象。这可太酷了，推特上的网友纷纷用自己的名字展开创作，看看自己如果变成神奇宝贝会是什么样子。
图注：网友 Elizabeth Holmes 的神奇宝贝形象
图注：网友 Upbeatblue 的神奇宝贝形象
图注：网友 Onion-sama 的神奇宝贝形象
输入一些漫画角色的名字也可以获得相匹配的神奇宝贝：
而那些陪伴人们童年的神奇宝贝在这个生成器中也有了新的样貌：皮卡丘、妙蛙种子、喷火龙、树才怪、路卡利欧、梦幻。
Pinkney 在推特上展示了这个神奇宝贝生成器的训练过程。
他表示，Stable Diffusion 是一个很好的通用模型，但要获得特定风格的输出不是件容易的事，这通常需要做大量枯燥的工作，制作复杂的文本提示库，或者你也可以偷懒只对图像生成模型进行微调。
Pinkney 在神奇宝贝图像的数据集上对初始的 Stable Diffusion 进行了微调。
首先是构建一个数据集。数据集包含神奇宝贝图像和对应的文本描述，比如妙蛙种子被描述成“一个红眼睛的绿色神奇宝贝图像”，绿毛虫则被描述为“一个长着红鼻子的绿黄两色玩具”。
当然，这些描述不是人工完成的，而是使用了神经网络来代劳，即图像描述模型 BLIP。虽然这些描述还不是十分完美，但也足够用了。
然后，他在 A6000 上只花费了几个小时对 AI 模型进行训练，让模型学习以神奇宝贝的风格来生成图像，但将先前的知识保留一段时间，最终对数据集产生过拟合。
开始时，样本是正常图像的样子，然后逐渐获得神奇宝贝的风格，随着训练的继续，最终呈现一个与原始提示不同的神奇宝贝图像：
这是一种很简单的微调，但它运行得非常好。有了这样一个微调后的模型，无论你给它什么提示，它都会生成神奇宝贝。所以不必再煞费苦心地想提示语了。
在创建神奇宝贝时，你可以选择输出多个：
Pinkney 表示，欢迎大家用更复杂的方式把这个模型专门地用在新领域。像这样的小工具就是 Stable Diffusion 这类 AI 模型开源好处的体现。
这个模型在网上引起创作热潮后，Pinkney 又发布了一篇博客补充了一些额外的工作细节。
他发现，令人惊讶的是，这个模型竟然设法记住了初始 Stable Diffusion 的一些通用知识，而它只是在一个有限的数据集上训练了几千步。但是，对神奇宝贝进行微调时，模型实际上很快就会开始过度拟合，如果只是以一种简单的方式从中采样，模型就会为新的提示生成胡言乱语式的神奇宝贝，也就是说，它已经灾难性地遗忘了它所训练的原始数据）。但是 Stable Diffusion 在训练期间保持模型的指数移动平均 (EMA) 版本，通常用于推理。
因此，如果使用 EMA 权重，我们实际上是在使用原始模型和微调模型的平均值。事实证明，这对于生成神奇宝贝而言是必不可少的。此外，你还可以通过直接将新模型与初始模型的权重进行平均来微调效果，以控制生成神奇宝贝的数量。微调和对模型进行平均的操作可以将原始内容与微调后的风格有效混合。
图注：左边是完全微调的模型，右边是只微调注意力层的模型。
另外，你也可以冻结模型的不同部分来进行微调，比如上图是两种微调方式的生成效果，可以看到，只微调了注意力层的模型可以生成更正常的 Yoda，但并不太擅长制作神奇宝贝。
版权文章，未经授权禁止转载。详情见 转载须知 。
本文地址： /article/72ad35224d73aa554bdf.html
煜子（Yuzi）,视觉设计师,在互联网行业,从事UI设计,WEB设计.2008年开始设计至今,专注高端品牌网站设计、移动应用、小程序、UI交互设计和用户体验开发.
57G游戏网为大家提供最好玩的游戏下载，游戏攻略和最新的外服手游网游资讯。
广东优美达精密机械有限公司
桐城安心汽车租赁有限公司（24小时服务热线手机：13955611190）专业提供各种桐城地区商务租车、个人租车、商务用车、婚庆租车、旅游租车、机场租车、自驾租车服务等，车型主要包括：大众、现代、福特、别克、本田等系列，并提供代驾及新手陪练服务。
广州仟岱机电设备有限公司，主营仟岱离合器，仟岱刹车器，台湾仟岱所生产产品。
“知慧之窗”是一个专注于知识与生活体验的综合互动空间，涵盖学习提升、职场技能、生活分享、兴趣交流等多种主题。无论您是寻找实用的学习资源，还是想分享生活中的点滴智慧，这里都为您提供了宽广的交流空间。这里聚集了各个领域的爱好者和专家，通过分享与互动，让每位用户都能在多元化的内容中获得启发，发现新的兴趣，收获与同好的连接，真正成为大家生活中的“智慧之窗”。
管家婆物联通是杭州致梦和任我行软件推出的管家婆软件在移动端的应用。无缝对接辉煌、分销、财贸、服装等系列。为企业提供完善的移动终端解决方案，在手机端轻松实现手机开单、数据查询、移动审批、外勤管理等多方面的移动信息化应用。
潍坊泽安达物流是一家从事潍坊到全国的陆运、空运、海运物流服务的物流公司。潍坊物流公司以快捷、准时、安全、优惠的服务宗旨为广大客户服务！
中华门窗网专业的铝合金门窗行业垂直门户,已有门窗相关企业8万多家。提供铝合金门窗品牌,铝合金门窗招商,门窗木门图片,门窗木门资讯,门窗木门评测等全方位铝合金门窗行业信息，为门窗、木门企业及铝合金门窗经销商提供专业的招商服务信息。
提供安卓苹果手机网游,最好玩的手机网游排行榜,手机网游攻略,最新手机游戏下载尽在7157手游网。
西安创新网是关于创新、创业主题集信息发布、企业服务平台、企业群组社区、知识积累于一体的综合门户。
很多火锅店利用明星效应来吸引市场的关注，现有很多人关注到陈赫的火锅店，这部分不仅想到店品尝美食，还想来加盟，但是，因为不知道陈赫的火锅店怎么加盟，所以迟迟没有开始运营门店，陈赫的火锅店为贤合庄，品牌自从面世以来，采用有料锅底吸引了很多消费者主动到店来品尝，消费者到店后不仅可以品尝美味的火锅食物，还能吃到独特的卤味，小盘菜、低单价、多品...。
随着吕四起步港区集装箱码头岸线获批，飞步科技为南通港打造的车路云一体化智慧港口应用方案，也于近期通过验收并正式交付客户，该方案完整包含车端无人驾驶、路端智能感知与云端调度管理等产品服务，意味着基于车路云一体化协同应用的吕四起步港区已具备开展高效、稳定常态化运营的能力，自动驾驶集卡，IGV等多车型组成的自动化运载队列，也已投入水平运输编...。
ZHANGWWW大神级投影控发表于2023，12，241.连接电源和信号源，a.连接电源线，然后按下电源按钮开启投影仪；b.连接信号源，如电脑或笔记本电脑，，可以使用HDMI线、VGA线或DVI线等连接方式；c.确保投影区域周围没有任何遮挡物，以获得最佳投影效果，2.调整投影仪位置和角度，a.将投影仪放置在稳定的平面上，以便产生稳定的...。
连锁加盟是指主导企业把自己开发的产品，服务的营业系统，包括商标，商号等企业形象，经营技术，营业场合和区域，，以营业合同的形式，授予加盟店的规定区域内的经销权或营业权，让加盟主可以用加盟总部的形象、品牌、声誉等，在商业的消费市场上，招揽消费者前往消费，而且加盟主在创业之前，加盟总部也会先将本身的技术等经验，教授给加盟主并且协助创业与经营...。
相信对于支付宝，大家都是很熟悉的了，它作为一款第三方支付软件，中国移动支付领域的开拓者，自推出到现在也是已经积累了将近10亿的用户，知名度可以说是非常高的，目前在国内，也就只有社交领域的老大微信能够与之比较一番了，但是相对来说的话，支付宝在口碑上还是要比微信好上一些的，毕竟它不管是在回馈用户的福利活动上，还是自身参与和推出的公益活动上...。
央视网信息，11月12日，交通运输部正式对外发布，交通物流降本提质增效执行方案，以下简称，执行方案，，提出到2027年，交通物流降本提质增效取得清楚功效，执行方案，明白，到2027年，交通物流降本提质增效取得清楚功效，社会物流总费用与国际消费总值的比率力争降落至13.5%左右，国度综合平面交通网主骨架愈加完善，基础设备联网补网强...。
自己从未在人人贷有过借贷记载，然而确收到人人贷的催收电话，不仅是我，我好友那里也收到了催收电话，还是不时不停的打，想要和客服协商这个事件，电话不时打不通，机器语音说app内可以咨询在线客服，然而app内显示早曾经敞开在线客服服务，只剩电话服务，宿愿人人贷客服可以被动和我咨询，我真实是咨询不上了，我每隔3......。
怪侠一枝梅外面一个叫张忠的人是不是胡歌演的，姓名，姚奕辰英文名字，Ethan昵称，姚小帅粉丝名称，星河生日，1月28日星座，搞怪的水瓶身高，182cm体重，70kg民族，汉国籍，中国籍贯，上海现寓居地，北京毕业院校，上海戏剧学院07届扮演系本科专业，扮演职业，影视演员写真，11张，喜好，看书、静止、CS，以及所有陈腐的事物专长，扮演最...。
电脑视频剪辑软件最好用的是由Adobe推出的Premiere，这是一款专业的非线性视频编辑软件，这款软件领有丰盛的配置和可裁减性，因此上手是有必定的难度，此外，好用的电脑视频剪辑软件还有微软的moviemaker，blackmagic推出的达芬奇，DaVinci，以下是具体引见，1、最好用的也是如今比拟多人经常使用的电脑视频剪辑软件...。
欧宝雅特敞篷车是一款十分低劣的敞篷车型，它领有杰出的性能、温馨的内饰和时兴的外观设计，是那些谋求驾驶乐趣和时兴品味的生产者的现实选用，从性能角度来看，欧宝雅特敞篷车装备了先进的能源系统和低劣的悬挂系统，能够提供杰出的减速性能和操控稳固性，无论是在市区路线还是高速公路上，它都能够为驾驶者带来稳固而流利的驾驶体验，此外，该车型还领有先进的...。
[全球网报道]综合路透社、塔斯社等多家媒体7月2日报道，依据美国商务部下属机构工业和安保局颁布的信息，该部门选择把6家来自中国、南非、阿联酋以及英国的实体列入无关，实体清单，，要素与所谓，国度安保，和外交政策疑问无关，据路透社报道，上述6家实体中，来自中国和阿联酋的实体各有两家，来自南非和英国的实体各有1家，报道称，美方选择对这些实体...。
百度贴吧表情包是提取自贴吧中的经典表情包，其实有很多的软件自带表情包都挺有趣的，各类经典的表情总是能够带给用户别样的体验，喜欢就来绿色资源网下载吧！ 百度贴吧qq表情包简介：百度贴吧QQ表情包720个表情!颜表情已由文字转换为图片。所有表情顺序和度娘
更新专题,提供更新的相关文章和相关资讯,在本栏目你可以看到更新这个内容的相关各类文章很多篇,如有不足请提供给我们更多更新的文章供大家查阅.
神虎数据恢复可以快速恢复你误删除的各种文件数据信息，包括文档、图片、视频等各种数据类型。在恢复文件时，你可以在线预览需要恢复的文件资源
TAFIQ蓝牙适配器驱动是一款专为塔菲克蓝牙设备所推出的驱动安装程序。它能够满足集成各种蓝牙数字设备的需求，通过安装程序之后，就能使原版不带蓝牙的电脑，具有连接功能，方便用户连接键盘、鼠标、蓝牙音响等设备，支持多个设备的同时连接。功能介绍支持Windows2000、WindowsXP、WindowsVista、Windows7等系统IVTBlueSoleil蓝牙驱动支持中文界面支持多个系统实现电脑之间
破1000亿！江苏发布元宇宙“三年计划”
鼓励人心的爱情说说爱情说说朋友就是把你看透了还能喜欢你的人如果我们之间有步的距离你只要跨出第一步我会朝你的方向走其余的步送你一副对联上联为你痴为你累为你受尽所有罪下联为你死为你狂为你咣咣撞大墙横批为爱疯狂思念是屋檐洒落的滴答声是湖面泛起的微波是晨曦中的薄雾是梦醒时的迷茫此刻的我非常想你思念你的日日月月时时秒秒心随你动如...
