我们提出了Imagen,一个文本到图像的扩散模型,具有前所未有的写实主义程度和深度的语言理解。Imagen建立在理解文本的大型变压器语言模型的基础上,并依赖于在高保真图像生成中扩散模型的强度。我们的关键发现是,在纯文本语料库上进行预训练的通用大型语言模型(例如T5)在编码用于图像合成的文本方面惊人地有效:在Imagen中增加语言模型的大小比增加图像扩散模型的大小更能提高样本保真度和图像-文本对齐。Imagen在没有经过COCO训练的情况下,在COCO数据集上获得了7.27的最新FID分数,并且人类评分者发现Imagen样本在图像-文本对齐方面与COCO数据本身不相上下。为了更深入地评估文本到图像模型,我们引入了DrawBench,这是一个全面且具有挑战性的文本到图像模型基准测试。使用DrawBench,我们将Imagen与最近的方法进行了比较,包括VQ-GAN+CLIP、潜在扩散模型和DALL-E 2,并发现人类评分者在并排比较中更喜欢Imagen,无论是在样本质量还是图像-文本对齐方面。

类似的工具

美图设计室-AI绘画
AI智能工具 为设计助力

千库AI·无限画
AI应用场景全面覆盖,未来将创造无限可能

DragGAN(GitHub)
全部开源,支持Windows, macOS, Linux

秒画-SenseMirage
打造AI画图“模型超市”,心想画成
其他人也看的工具

PaperPass论文查重系统
动态指纹技术保障、权威可信赖的论文检测系

智元兔论文写作
AI论文、报告写作神器

小库AI云
一站式图/文生图、模型训练、模型共享平台

全球人工智能技术大会
聚焦“交叉、融合、相生、共赢”的办会主题

有道智云AI开放平台
提供安全,可靠和高效的云服务

aiXcoder
根据开发者给出的“自然语言描述”一键生成“完整方法级代码”的智能编程应用