instaflow:利用校正流技术加快将文本转化为图像的过程

极客号(Daydx.com)9月15日 消息:InstaFlow是一个快速、一步生成图像的模型,能够以接近Stable Diffusion的图像质量显著减少计算资源需求。这种高效率源自最近的Rectified Flow技术,它训练具有直线轨迹的概率流,因此本质上只需要一步即可进行快速推理。

instaflow:利用校正流技术加快将文本转化为图像的过程

项目地址:https://github.com/gnobitab/instaflow

InstaFlow具有几个优点:

极快推理:InstaFlow模型是一步生成器,它直接将噪声映射到图像,避免了弥散模型的多步采样。 在我们的A100GPU机器上,推理时间约为0.1秒,与原始Stable Diffusion相比可节省约90%的推理时间。

高质量:InstaFlow生成具有Stable Diffusion那样复杂细节的图像,在MS COCO2014数据集上的FID与最先进的文本到图像GAN(如StyleGAN-T)相当。

简单高效的训练:InstaFlow的训练过程只涉及有监督训练。 借助预训练的Stable Diffusion,仅需199个A100GPU天即可获得InstaFlow-0.9B。

方法:用文本调整的反流整流生成概率流

instaflow:利用校正流技术加快将文本转化为图像的过程

流程包括三个步骤:

1. 从预训练的Stable Diffusion生成(文本,噪声,图像)三元组

2. 应用文本调整的反流生成2-Rectified Flow,这是一条整流的生成概率流。

3. 从2-Rectified Flow中迁移学习得到一步InstaFlow。 注意迁移学习和反流是正交的技术。

如视频和图像所示,直线流具有以下优点:

1. 直线流需要更少的步骤来模拟。

2. 直线流在噪声分布和图像分布之间提供了更好的耦合,因此允许成功的迁移学习。

InstaFlow的核心功能有:

– 快速一步生成

– 与Stable Diffusion相当的图像质量

– 简单高效的训练过程

– 利用文本调整的反流产生直线概率流

– 从直线流中迁移学习以实现一步生成

通过直线流和迁移学习,InstaFlow实现了快速生成高质量图像的目标,是新一代文本到图像生成模型的杰出代表。

郑重声明:本文内容及图片均整理自互联网,不代表本站立场,版权归原作者所有,如有侵权请联系管理员(admin#wlmqw.com)删除。
(0)
用户投稿
上一篇 2023年9月15日
下一篇 2023年9月15日

相关推荐

  • 儿媳妇偷绑婆婆银行卡购买《王者荣耀》皮肤 盗刷1.7万元

    7月11日,贵州惠水法院审理了一起盗窃罪案件,儿媳妇竟然偷婆婆的钱买《王者荣耀》游戏里的皮肤,让人大跌眼镜。 据了解,2021年8月,儿媳妇在家修养,借助帮婆婆注册微信的机会,拿到…

    2023年7月19日
  • 调节桌面图标的3个技巧(win10桌面图标变大了怎么调小)

    最近,有位朋友发现自己的win7系统桌面图标太小,不知道怎么去解决。其实,关于更改桌面图标大小的方法,还是比较多的。如果你也不知道怎么去解决这个图标大小的问题,下面就来看看更改桌面…

    2023年10月13日
  • 2022端午节学校放假几天 端午节放假2022年放几天学生

    按照相关放假规定来看,端午节各单位学校都会享受端午这一法定假期,只是眼下随着6月的到来,也意味着暑假的脚步近了,对于学生群体来说,端午节与暑假相比,可以说十分微不足道,而下面我们就…

    2022年7月27日
  • “我是可以揍你的”,解放军遇外机挑衅,飞行员当场亮武器

    文/君剑 据央视16日视频消息,解放军海军航空兵在一次巡航活动中,遭遇外机前来挑衅。我飞行员当即喊话警告对方已经接近中国领空,必须立即离开。 视频内容显示,当时某国侦察机试图抵近我…

    2023年4月24日
  • 石家庄乘地铁公交无需72小时阴性证明 一些核酸检测点恢复开放

    中国青年报客户端石家庄11月15日电(中青报·中青网记者 樊江涛 朱洪园)今天,中青报·中青网记者了解到,石家庄市桥西区、长安区、裕华区、新华区、高新区市内五区再次开放一些核酸免费…

    2022年11月17日
  • 12333档案查询网官网查不到档案(12333档案查询网)

    养老保险档案查询系统 登录当地的社保网,进入个人查询系统,输入身份证号(社保卡号)就可查询(一般查询的是上一年份的缴费记录)。拨打12333社保查询电话,进行人工查询。查看自己的养…

    2023年10月14日
  • A股下跌,原因找到! 10多家公募,紧急解读!

    A股下跌,原因找到! 10多家公募,紧急解读! 1月22日,上证综指再度失守2800点整数关口。 当日,三大股指低开低走,午后开盘跌幅进一步加大,盘中均跌超3%。截至收盘,上证综指…

    2024年1月23日
  • 烧艾草对人体有害吗(sacdr)

    在WIN8下,sacd.iso怎么提取dff 1、有格式工厂,但一般用不了。 告诉你个好用的方法,找到原文件直接修改后缀名,手机需要下载ES文件浏览器操作。视频用QQ影音也可以。 …

    2023年7月23日
  • 不什么什么解的词语(不什么什么解)

    今天小编给各位分享不什么什么解的知识,其中也会对不什么什么解的词语进行解释,如果能碰巧解决你现在面临的问题,别忘了关注本站,现在开始吧! 不求什么解 不求什么解是不求甚解。 基本解…

    2023年5月4日
  • Redmi Note 13 Pro 开卖6期免息:免费用一年

    近日,一款名为Redmi Note 13 Pro 的手机在网上引发了广泛关注。据网友反映,这款手机提供了6期免息的优惠,相当于购买者可以免费使用一段时间。据称,Redmi Note…

    2023年9月22日

联系我们

联系邮箱:admin#wlmqw.com
工作时间:周一至周五,10:30-18:30,节假日休息