0.8秒出图!国产AI绘画上演“速度与激情”!
2022-11-09 15:27:23来源:银柿财经
秒速生图火爆全网
(相关资料图)
最近,在各大社交平台上,一款叫作“盗梦师”的AI绘画小程序火了。
具体火到什么程度呢?据以往团队的采访得知,9月产品刚上线一周时间,盗梦师便创造了日增5万用户的纪录。
从Midjourney 到 Stable Diffusion,再到国内如雨后春笋般涌现的AI绘画平台,在使用方式上差异不大,均采用「以文生图」的方式。「以文生图」顾名思义就是只要你把想法、脑洞以文字输入给AI,这些文字描述就会被算法驱动,变成一张张生动、精致的图片。
而真正能让盗梦师从众多AI绘画平台中脱颖而出的,当属其鲜明的技术优势与舒适的产品体验。
从输入描述到输出图片,全程仅不到5秒,对比其他产品动辄几十秒甚至几分钟的时间,可谓天壤之别。
同时还有多种绘画风格、多图批量输出、多尺寸高分辨率、画师参考等功能辅助用户开展创作,使得整个绘画过程更便捷、有趣和惠普。加之其免费的新手体验,上线以来便在用户间产生了良好的口碑。
最快,有多快
据了解,盗梦师由前谷歌人工智能研究院科学家、NLP自然语言处理领域预训练语言模型“ALBERT”第一作者——蓝振忠博士带队研发。
最终由西湖大学深度学习实验室和西湖心辰科技有限公司(西湖大学深度学习实验室孵化的 AIGC 创业公司)共同推出。
依托于西湖大学良好的科研和成果转化环境、充足的科研资金及软硬件设备,西湖心辰组建了一支长期致力于研究自然语言处理,计算机视觉及深度学习的结合与应用的团队。
在Stable Diffusion的基础上,盗梦师凭借团队在AI领域多年的深耕以及西湖大学实验室的成熟算力,找到了一个可发挥自有技术优势的地带,并通过“秒生图,生精图”的特点快速占领AI画画高地。
我们通过原生stable diffusion在pytorch、TensorRT与Oneflow三个框架下的实现与盗梦师自有模型对比可以看到:
pytorch上原生的Stable diffusion生成一张图需要3.4s,第三方Oneflow需要1.4s生成时间。而盗梦师的自有模型只需要0.8s,并且不会影响生成效果。
这是因为盗梦师针对速度和质量两个方面分别做了技术优化,在提速侧,进行了算子重写、模型量化、采样函数优化;在提质侧,采用了自有中文语言模型、多尺寸弹性训练等。这才使得盗梦师在生成图片时,不仅速度上有了质的提升,最终的呈现效果也有明显优化。
原生 Stable -Diffusion(左)与盗梦师生成图(右)对比
各大模型分析
从今年8月发布至今,Stable Diffusion仍是最火的开源AI生图模型。与其他开源图片生成模型相比,其有着出图速度快、质量高等特点。
但在画人物方面,Stable Diffusion的弊端也很明显,如经常存在多头、多只手、多条腿或人物部分肢体丢失等问题。
原生 Stable -Diffusion(左)与盗梦师(右)对比
同时,原生Stable Diffusion仅支持英文作为唯一输入语言,对于国内用户来说也十分不友好。
针对语言障碍的问题,国内曾有团队开源了支持中文的stable diffusion 模型——“太乙 Stable Diffusion”。但经测试发现,太乙Stable Diffusion虽然能够理解中文独特的文化表达,但语义理解方面仍有所欠缺,会给出与输入prompt不匹配的图片。
如输入:雾气弥漫的森林,中世纪风格霍比特人村庄
太乙 Stable Diffusion(左)与盗梦师(右)对比
而且无论对于哪种模型,图片质量的好坏都与输入的关键词密切相关,专业、适当的输入词需要用户有大量的经验,新手往往用户难以克服。
因此,改变模型是一切问题的根本解。
盗梦师改变了什么
如上文所说,文生图效果由模型的图像生成能力与自然语言理解能力共同决定。于是,盗梦师团队在训练图像生成能力的同时着重加强了机器理解层的能力,使自己区别于市面上的其他平台。
在图像生成方面,盗梦师根据过往在AI生成领域积累的经验,在前期做了大量科研和训练工作。并且使用了与Stable Diffusion不同的训练方案,使得盗梦师生成的图片更加精细,不会产生截断等问题。
原生 Stable -Diffusion(左)与盗梦师(右)对比
在语义理解方面,依赖于西湖心辰在NLP领域的大量技术与数据积累,盗梦师自有模型不仅能更好地理解用户输入词,还扩大了原生Stable Diffusion的文本长度限制,支持更长的文本输入。
此外,针对不懂得如何撰写关键词的新用户,盗梦师还开发了“梦境增强模式”,可以对用户的输入词做联想增强,帮助新手画师更轻易地画出惊艳的图片。
梦境增强前(左)与梦境增强后(右)对比
当然,盗梦师目前仍然存在一些业内普遍的待解决的问题,比如众所周知的AI画手、AI吃面画的缺陷
在蓝振忠看来,目前AI绘画仍处于早期阶段,虽然目前的图片生成 AI 能力确实到达了历史上的峰值,但还是需要更大的规模的数据以及更长时间的训练。
持续迭代后的AI,绘画速度会更快,可以及时调控的能力也会更强。以盗梦师自我进修的速度和深度来看,我们有理由相信它将是未来引领 AIGC 潮流的先锋。
责任编辑:hnmd003
相关阅读
-
0.8秒出图!国产AI绘画上演“速度与激情”!
最近,在各大社交平台上,一款叫作“盗梦师”的AI绘画小程序火了。从Midjourney到StableDiffusion,再到...
2022-11-09
相关阅读
-
0.8秒出图!国产AI绘画上演“速度与激情”!
最近,在各大社交平台上,一款叫作“盗梦师”的AI绘画小程序火了。从Midjourney到StableDiffusion,再到...
-
应用机器学习算法 我国科学家准确预测紫花苜蓿秋眠性0每日焦点
新京报讯(记者周怀宗)如今,机器学习算法正应用在越来越多的领域。记者近日从中国农科院获悉,该院科...
-
创造历史,10月自主品牌首次霸榜前三
创造历史,10月自主品牌首次霸榜前三不仅是头部车企持续走强,10月自主在零售与批发中的份额双双突破50%...
-
世界微动态丨新款宝马X6渲染图曝光 最快将于年内亮相
新款宝马X6渲染图曝光最快将于年内亮相作为豪华轿跑SUV的引领者,宝马X6的关注度一直居不下。现款在售车...
-
天天快播:非法提供韩剧获利221万余元,5名韩剧TV相关负责人获刑
据信号财经消息,近日,江阴法院公布一起案件。2020年5月初,被告人
-
天天热推荐:或售40万左右 全新丰田皇冠国内首发定档
或售40万左右全新丰田皇冠国内首发定档近日,据一汽丰田官方获悉,丰田全新皇冠品牌将于11月15日正式发...
-
每日看点!韩剧TV回应“相关负责人获刑”:案涉App为山寨版
今日,韩剧TV官方微博发布声明称:最近“5名韩剧TV相关负责人获刑”
-
环球消息!进博会京东健康与赛诺菲战略合作升级 开启特应性皮炎在线全病程管理新篇章
鞭牛士报道 日前,第五届中国国际进口博览会(以下简称:进博会)
-
谍照 | 极氪新车曝光 有望于明年上市
谍照|极氪新车曝光有望于明年上市日前,我们从相关渠道获得了一组极氪新车内部代号BX1E的新车谍照,这款...
-
高中老师将羊了个羊改编成历了个史
据牛视频,近日,浙江湖州一高中历史老师徐娇娇改编了“羊了个羊”
-
谍照 | 保时捷718纯电版曝光,最快2023年亮相
谍照|保时捷718纯电版曝光,最快2023年亮相近日,有海外媒体曝光了全新保时捷718纯电版的谍照,此前,品...
-
法国快递员吐槽7小时工作太累
据财经网报道,法国凡尔赛的快递小哥奥利维吐槽称,自己给中国物流
-
hdmi线和dp线有什么区别?hdmi线什么品牌质量好?
hdmi线和dp线有什么区别?一、传输速度大不相同不说专业术语,通俗的说,DP接口比HDMI接口的传输速度大...
-
怎么设置光驱启动?光驱启动bios设置方法
怎么设置光驱启动?光盘启动当然是在bios里边设置,对于如何进入bios请在站内查看相关的文章,这里就不多...
-
医用电源可以给手机充电么?医疗电源和普通电源有什么区别?
医用电源可以给手机充电么?医疗电源不能为手机充电。当今社会,随着科学技术的不断进步,越来越多的现代...
-
修复充电器怎么使用?修复充电器真的能修复电瓶吗?
修复充电器怎么使用?1 智能脉冲修复充电器主要部分是典型的半桥式两段充电器,用一片微机芯片作为核心控...
-
希格玛双11购物节医用308准分子白癜风银屑病光疗仪大促销
希格玛双11购物狂欢节来了,活动时间:2022 11 10-2022 11 13上海希格玛308LED白癜风紫外线光疗仪、...
-
爱国者平板电脑为什么打不开?爱国者平板电脑怎么恢复出厂设置?
爱国者平板电脑为什么打不开?1 如果是摔过或压过很可能是硬件坏了,如果是正常使用中,安卓的可以充着...
-
奥运会几年举办一次?奥运会国家出场顺序怎样排的?
奥运会几年举办一次?奥运会即奥林匹克运动会,每四年举办一次;其中夏季奥运会在夏天举行,包含田径、游...
-
什么是波谱仪?波谱仪和能谱仪有什么区别?
什么是波谱仪?波谱仪全称为波长分散谱仪(WDS)。在电子探针中,X射线是由样品表面以下m数量级的作用体积...
-
三叶吊扇怎么接线?三叶吊扇和五叶吊扇有什么区别?
三叶吊扇怎么接线?三叶吊扇接线方法:用万用表量两线之间的电阻,如果有两根线的阻值最大,那么第三根...
-
天猫运营直通车怎么开通?天猫运营直通车烧超额了可以要求赔偿吗?
天猫运营直通车怎么开通?天猫直通车作为商家最重要的推广引流工具之一,其实对于新手来说是比较复杂的...
-
合约机值得购买吗?合约机和裸机有什么区别?
合约机值得购买吗?不建议购买合约机1、机卡不能分离。合约机捆绑条款太多,用户被束缚感强。 在合约期...
-
博林特电梯口碑怎么样?博林特电梯故障代码原因及恢复方法
博林特电梯口碑怎么样?1、运行平稳 电梯的动力系统和油缸作为核心部件完全由进口产品组成,运行时具有...
-
宏基电脑是哪个国家的牌子?广西宏碁电脑售后服务点有哪些?
宏基电脑是哪个国家的牌子?宏碁(qí)成立于1976年,是一个国际化的自有品牌公司,主要从事于智能...
-
纯后级功放是什么意思?纯后级功放可以直接接音源吗?
纯后级功放是什么意思?纯后级功放简称后级功放,是用于增强信号功率以驱动音箱喇叭发声的电子装置。纯...
-
低音炮连接线怎么接?低音炮和音响有什么区别?低音炮电路图
低音炮连接线怎么接?1、低音炮上面的正极线接着受点火开关控制的acc线上;2、就是通过点火开关控制,阴...
-
联通手机充值话费怎么充?联通手机充值话费可以开发票吗?
联通手机充值话费怎么充?联通手机客户可通过以下方式充值话费:1、下载并登录中国联通APP:首页直接点...
-
天津自贸区属于什么区?天津自贸区概念股有哪些?
天津自贸区属于什么区?天津自贸试验区主要涵盖了3个功能区,分别是天津港片区、天津机场片区、以及滨海...
-
零和博弈什么意思?零和博弈是好的还是坏的?
零和博弈什么意思?零和博弈是博弈论的一个概念,属非合作博弈。它是指参与博弈的各方,在严格竞争下,...
精彩推荐
阅读排行
精彩推送
- 人民币对日元升值什么意思?人民...
- 人民币中间价由什么决定?人民币...
- 内盘外盘委比是什么意思?内盘外...
- 20万投资什么项目赚钱?零投资赚...
- 应收账款周转率多少合适?应收账...
- 净现值是什么意思?净现值npv的...
- 美国驻南极基地70多人感染新冠!...
- 20到30万的车买什么好女士?买车...
- asi指标是什么意思?asi指标最佳...
- 资本运作是什么意思?资本运作与...
- 邮政储蓄银行怎么查余额?邮政储...
- k线孕线什么意思?阳孕阳k线的技...
- 理财封闭式和开放式哪个安全?理...
- 累计投票制度是什么意思?累积投...
- 可转债转股怎么操作?可转债转股...
- 平安好车主卡值得入手吗?平安好...
- 台积电是什么东西?台积电是哪个...
- “中国马拉松第一人”张亮友去世...
- 收敛三角形一般出现在几浪?收敛...
- 股票pb是什么意思?pb估值多少合理?
- 富格林:严斥阻止出金亏损受害 ...
- 英特尔携创新科技亮相进博会,向...
- 辣有道麻辣香锅有几种口味?辣有...
- 福建一工厂日薪2千招缝纫机师傅...
- 换手率是什么意思?换手率高而量...
- 股票申购认购是什么意思?股票申...
- 贷款买车首付多少钱?贷款买车要...
- 禽流感是什么意思?禽流感概念股...
- 基辅拟规划300万人大撤退!基辅...
- 老千股是什么意思?老千股为什么...