打造神奇宝贝新世界 Diffusion 大神微调 无敌了 Stable 生成式 AI (打造神奇宝贝的小说)
作为一个强大、公开且足够简单的模型，最近大火的 Stable Diffusion 在文本生成图像之外，给了大家无限的创作可能性。
最近，来自 Lambda Labs 的机器学习研究员 Justin Pinkney 对该模型进行了微调，构建了一个神奇宝贝生成器！
下图是输入名字后生成的一些神奇宝贝：戴珍珠耳环的少女、奥巴马、特朗普、鲍里斯·约翰逊、龙猫、Hello Kitty。
Lady Gaga、鲍里斯·约翰逊、普京、默克尔、特朗普、柏拉图：
除了现有的角色和公共人物，你还可以输入一个描述来生成自己想象的神奇宝贝：骷髅祭司
你也可以输入自己的姓名或网名，生成属于自己的神奇宝贝形象。这可太酷了，推特上的网友纷纷用自己的名字展开创作，看看自己如果变成神奇宝贝会是什么样子。
图注：网友 Elizabeth Holmes 的神奇宝贝形象
图注：网友 Upbeatblue 的神奇宝贝形象
图注：网友 Onion-sama 的神奇宝贝形象
输入一些漫画角色的名字也可以获得相匹配的神奇宝贝：
而那些陪伴人们童年的神奇宝贝在这个生成器中也有了新的样貌：皮卡丘、妙蛙种子、喷火龙、树才怪、路卡利欧、梦幻。
Pinkney 在推特上展示了这个神奇宝贝生成器的训练过程。
他表示，Stable Diffusion 是一个很好的通用模型，但要获得特定风格的输出不是件容易的事，这通常需要做大量枯燥的工作，制作复杂的文本提示库，或者你也可以偷懒只对图像生成模型进行微调。
Pinkney 在神奇宝贝图像的数据集上对初始的 Stable Diffusion 进行了微调。
首先是构建一个数据集。数据集包含神奇宝贝图像和对应的文本描述，比如妙蛙种子被描述成“一个红眼睛的绿色神奇宝贝图像”，绿毛虫则被描述为“一个长着红鼻子的绿黄两色玩具”。
当然，这些描述不是人工完成的，而是使用了神经网络来代劳，即图像描述模型 BLIP。虽然这些描述还不是十分完美，但也足够用了。
然后，他在 A6000 上只花费了几个小时对 AI 模型进行训练，让模型学习以神奇宝贝的风格来生成图像，但将先前的知识保留一段时间，最终对数据集产生过拟合。
开始时，样本是正常图像的样子，然后逐渐获得神奇宝贝的风格，随着训练的继续，最终呈现一个与原始提示不同的神奇宝贝图像：
这是一种很简单的微调，但它运行得非常好。有了这样一个微调后的模型，无论你给它什么提示，它都会生成神奇宝贝。所以不必再煞费苦心地想提示语了。
在创建神奇宝贝时，你可以选择输出多个：
Pinkney 表示，欢迎大家用更复杂的方式把这个模型专门地用在新领域。像这样的小工具就是 Stable Diffusion 这类 AI 模型开源好处的体现。
这个模型在网上引起创作热潮后，Pinkney 又发布了一篇博客补充了一些额外的工作细节。
他发现，令人惊讶的是，这个模型竟然设法记住了初始 Stable Diffusion 的一些通用知识，而它只是在一个有限的数据集上训练了几千步。但是，对神奇宝贝进行微调时，模型实际上很快就会开始过度拟合，如果只是以一种简单的方式从中采样，模型就会为新的提示生成胡言乱语式的神奇宝贝，也就是说，它已经灾难性地遗忘了它所训练的原始数据）。但是 Stable Diffusion 在训练期间保持模型的指数移动平均 (EMA) 版本，通常用于推理。
因此，如果使用 EMA 权重，我们实际上是在使用原始模型和微调模型的平均值。事实证明，这对于生成神奇宝贝而言是必不可少的。此外，你还可以通过直接将新模型与初始模型的权重进行平均来微调效果，以控制生成神奇宝贝的数量。微调和对模型进行平均的操作可以将原始内容与微调后的风格有效混合。
图注：左边是完全微调的模型，右边是只微调注意力层的模型。
另外，你也可以冻结模型的不同部分来进行微调，比如上图是两种微调方式的生成效果，可以看到，只微调了注意力层的模型可以生成更正常的 Yoda，但并不太擅长制作神奇宝贝。
版权文章，未经授权禁止转载。详情见 转载须知 。
本文地址： https://www.gpxz.com/article/72ad35224d73aa554bdf.html
http://img.55xnjd.com/为你介绍旭佳教育招生网为你介绍职高学校的一些招生信息，其中包括职高学校招生简章，职高学校招生电话，职高学校招生地址，职高学校招生学费，职高学校招生条件，职高学校排名
4399托马斯小游戏大全收录国内外托马斯,托马斯小游戏,托马斯小火车,托马斯找铁轨小游戏,托马斯小游戏下载,托马斯过河小游戏,托马斯拼图小游戏等尽在4399小游戏。
豆果美食是最优质的美食菜谱社区,提供各种菜谱大全,食谱大全,家常菜做法大全,丰富的菜谱大全可以让您轻松地学会怎么做美食,展现自己的高超厨艺,开启美好生活！
东莞市百稳电气有限公司是专业从事电力稳压器、变压器、调压器的生产的产销公司，产品适用于所有电网电压不稳及对电网电压有高要求的用电设备，欢迎咨询定制0769-81184549。
山东联创产业发展集团
九寨沟旅游网是四川青旅九寨沟官方电子商务平台，为游客提供九寨沟黄龙酒店、门票、租车、包车、机票、旅游线路在线预订服务以及导游或伴游等一体化服务。
承接广东各地区星级酒店宾馆,工厂学校数字电视改造工程，深圳乐坤轩视频科技有限公司生产销售有线电视前端设备，数字电视调制器，远程会议高清编码器，远程医疗系统软件，IPTV互动系统服务器，智慧城市三网融合系统，有线电视器材批发。
纵横云专业IDC云计算服务商,提供站群服务器,显卡服务器,GPU服务器,动态拨号vps,高防服务器,多ip服务器,大带宽服务器,海外云服务器,原生ip服务器等国内外主机资源的租用购买及托管服务,受到行业和用户的一致好评。
微信礼包码：50tt 玩传奇就上50tt(网站速记：天天网络) 每日最高可免费领取1000免费充值 详情访问官网www.50tt.com
温州市瑞龙机械成套有限公司（原温州市轻工机械成套厂）是中国印刷工业协会及上海印别包装机械（焦团）成员企业，国内唯一的磨刀设备专业生产厂家
文档家提供大学生自学学习资源和在线学习视频教程，主要包括各种精品课程、考研考证、考试题库、课件资料、标准资料、图纸模型以及大量专业技术资料分享！
湖南省总会计师协会（英文缩写HNCFO）是经省民政厅批准，依法登记成立的跨行业、跨部门、跨地区、跨所有制的全省性、专业性和非营利的社团组织。由本省及中央驻湘单位担任总会计师、财务总监、分管财务的行政负责人、单位财务机构负责人以及高等院校、科研院所的会计专家、教授等高级会计人员自愿组成。本会实行会员代表大会领导下的会长负责制，驻会会长主持日常工作。
网络的红火，推动大时代下某宝网店的发展，近几年，由于社会工作节奏不断加快以及压力的不断加大，很多年轻人都无心走进职场，纷纷选择转战某宝网络，决心自己翻身做老板，不过，作为某宝新手，他们对于如何在某宝开网店还不是很了解，因此，他们中的绝大多数人都需要前辈的指点，故而接下来，小编将会带领各位某宝网店新手们一起来了解某宝开店的相关流程，如何...。
智慧之选市场，想要加盟小吃项目的不在少数，因为与其他智慧之选相比，小吃加盟明显成本更低，资金回笼更快，且小吃加盟的技术要求也不甚高，基本大众智慧之选者都可以选择，当然，并不是决定了智慧之选方向就可以一劳永逸的，还要选对品牌，你知道市场有哪些热销的小吃品牌吗，欢迎大家参照小编整理的小吃加盟排行榜看看自己中意的品牌是否榜上有名吧，1、孙大...。
十四五，时期，我国数字经济已进入数实融合、产业互联为重点的新发展阶段，在绿色低碳的高质量发展道路上，科技企业可以做些什么，8月23日，2022中国产业互联网，江门，峰会碳中和开放专利技术与应用分论坛给出了答案，在会上，腾讯公司、微软中国、阿里巴巴、百度、京东、快手、蚂蚁集团、美团、万科、威胜信息等10家企业联合宣布，共同组成碳中和专...。
11年前，金山软件在香港联交所挂牌上市，发行价为3.6港元，融资净额为6.261亿港元，雷军时任CEO，11年后的今天，小米科技在香港联交所挂牌上市，发行价17港元，市值达539亿美元，雷军有了更多身份，金山软件董事长、小米创始人兼CEO，历尽千帆，雷军从一副少年模样，已经晋升为出场自带BGM的网红总裁，在他自己眼中，小米上市前夕，他...。
2021年，中国ToB市场持续进化，从需求端，越来越多的企业从数字化的理解和实践从原来表面化的数字化工具级应用，转向在组织、业务、产品、运营等方面的尝试，从大环境来看，疫情、政策推动，以及技术融合趋势带来的潜移默化的影响，更是加快ToB市场的格局、面貌，浪潮之中，正涌现又一批代表性企业，他们有的具备超强的技术落地能力，有的拥有行业多年...。
说到昂贵的顶级汽车，你首先能想到的品牌有哪些呢，无外乎是布加迪、法拉利、兰博基尼、宾利和劳斯莱斯等等，然而把目前售价最贵的车做个排序，其实就所剩无几了，参照新车的售价，目前世界记录最贵的10款车仅出自5个品牌，基本都是限量款和定制版，像，拉法，和，牛王，这种基本无缘前十，作为普通消费者，这些昂贵的汽车虽然遥不可及，但并不妨碍我们去欣赏...。
[谷神星一号海射型，遥二，·新浪微博号运载火箭成功发射]谷神星一号海射型运载火箭是基于谷神星一号运载火箭为满足海上发射顺应性改良的产品，为四级固体商业运载火箭，具有灵敏性强、义务顺应性好、发射经济性优等特点，谷神星一号海射型，遥二，·新浪微博号运载火箭成功发射此次义务是@星辰能源航天成功的第二次海上发射义务，为顺应此次卫星轨道倾角需要...。
马自达2三厢车是一款功能杰出、外观共同的车型，车身颜色方面，Mazda2和Mazda2劲翔，炫动款，区分用胜利蓝和奥秘银代替了原车型的热情蓝，胜利蓝彰显炫动个性，奥秘银斯文高贵更显大气，令人眼前一亮，此外，Mazda2炫动款1.5L车型前保险杠参与了下裙边，让前脸愈加圆润丰满，更具动感，内饰方面，炫动款座椅和门板内饰更新为彩色面料，组...。
颜心记，是由爱奇艺出品、金禾影视联结出品，胡蓉、姜宁、何雨桐、陈璐莎、邹藜、刘菁编剧，于中中、蒋继正、徐棱棱执导，罗云熙、宋轶领衔主演，陈瑶、丞磊、黄日莹...概略颜心记什么时候拍完未确定，颜心记是一部电视剧，具体的杀青时间并没有公开宣布，但是从拍摄周期来看，电视剧的拍摄周期在半年至一年不等，因此，从开拍的时间来看，颜心记大约在20...。
阿姑杀羊看母鸡干啥呀是什么歌，最新这首歌的歌词一下子就抓住了不少抖音用户们的心。这是TitiKamal献唱的歌曲，名为《RinduSemalam》。下面小编带来了阿姑杀羊歌曲介绍，想知道歌曲详细信
遁地模拟器是一款可以让游戏玩家在电脑上玩手游的安卓模拟器，用户可以轻松实现多款游戏同时在线或多账号同时在线，它特别适合工作室使用，模拟器也有一个非常内置的模拟器，支持海量手游、应用工具，稳定顺畅，极速
欢迎来到pc6苹果网,我们有PC6小遍告诉你很多人都不知道的iphone手机和iPad平板电脑的使用小技巧，还有iOS系统全方位使用方法哦！凡是你不知道的IOS技巧都可以在这里找到答案。
探险者们，欢迎来到最新、最激动人心的挑战，迷宫逃生游戏！今天，我们将踏上一场刺激而惊险的冒险之旅，穿越一个充满谜题和挑战的迷宫，在这几个游戏中，你将面临各种考验，需要巧妙运用你的智慧和勇气，才能成功逃出迷宫的束缚，废话不多说，让我们勇敢地踏出第一步，开始这场未知的冒险！1、，鬼谷之谜2，如果你不小心陷入了夜幕镇，你会怎样才能摆脱这里的...。
数据、算法、算力，被称为AI的三驾马车，其中，数据对于算法模型的效果至关重要，以深度学习为核心的AI，为了避免发生过拟合或欠拟合的情况，需要使用大量数据来进行模型训练，从而使模型达到更好的拟合优度，这对于解决场景问题无疑大有裨益，不过，通过大量数据来训练算法，从理论上看无懈可击，但当AI走向落地场景，就不那么容易了，以数据问题为例，对...。
发表在专业问答2021，2，1913，44展示机型信息，品牌型号，极米H2系统版本，GMUI3.6使用螺丝刀将极米H2周边的螺丝取下；使用撬棒打开极米H2的顶盖，并将连接线断开，取下光机和DMD组件，找到风扇；使用吹气球将风扇中的灰尘去除，然后将各组件按原路安装回去即可，极米h2怎么清理里面的灰尘1.将极米H2周边的螺丝用螺丝刀取下来...。
连锁加盟是指主导企业把自己开发的产品，服务的营业系统，包括商标，商号等企业形象，经营技术，营业场合和区域，，以营业合同的形式，授予加盟店的规定区域内的经销权或营业权，让加盟主可以用加盟总部的形象、品牌、声誉等，在商业的消费市场上，招揽消费者前往消费，而且加盟主在创业之前，加盟总部也会先将本身的技术等经验，教授给加盟主并且协助创业与经营...。
根据第十三届全国人民代表大会第一次会议批准的国务院机构改革方案，组建中华人民共和国国家医疗保障局，作为国务院直属机构，2018年5月31日，中华人民共和国国家医疗保障局正式挂牌，国家医疗保障局和人社部都直接归国务院管理，两个是平级的人社部管不了国家医保局扩展阅读，保险，怎么买，哪个好，手把手教你避开保险的这些坑医保系统绑定药师需要几...。
