颠覆想象的AI绘画:Dall-E 2使用指南

围绕OpenAI推出的第二代DALL-E 2系统的讨论一直处于两极分化的状态,甚至在其推出了几个月后依旧如此。

有用户认为这是一项可以重新定义艺术的突破性创新,而批评者则将其视为人工智能图像生成器给创意产业带来厄运的开始。

然而毫无疑问的是,DALL-E 2为我们创造和消费艺术开辟了新的可能性和挑战。本文详细介绍了AI图像生成器DALL-E 2的用法和缺点。

DALL-E 2是一款人工智能图像生成器,它可以根据自然语言的文本描述创建图像和艺术形式。换句话说,它是一个根据文本生成图像的人工智能系统。

2021年1月,OpenAI推出了DALL-E模型,DALL-E 2是其升级版。“DALL-E”这个名字源于西班牙著名艺术家Salvador Dalí和广受欢迎的皮克斯动画机器人“Wall-E”的组合。

2022年7月,DALL-E 2进入测试阶段,可供白名单中的用户使用。同年9月28日,OpenAI取消了白名单的要求,推出了任何人都可以访问并且使用的开放测试版。

声音 | 比利时前首相:很多金融行业现状将会被区块链等颠覆 加密货币将会成为一种新的趋势:据新浪财经报道,7月25日消息,由亚洲银行家主办的2019中国未来金融峰会在北京举行,比利时前首相Guy Verhofstadt演讲表示,技术的颠覆意味着有很多金融行业现状将会被人工智能、量子计算机、新技术、区块链所颠覆,未来互联网的组织形式也会发生改变,加密货币将会成为一种新的趋势。[2019/7/25]

与最初的DALL-E一样,DALL-E 2也是一种语言生成模型,它使用文本提示来创建原始图像。

尽管和之前DALL-E具有的120亿个参数的模型不同,DALL-E仅仅具有大约35亿个参数,但DALL-E 2生成的图像分辨率是DALL-E的四倍,这是一次令人印象深刻的升级。同时,DALL-E 2在真实感和字幕匹配方面似乎也做得更好。

听起来,DALL-E 2很有未来感,可能会让新用户望而生畏,但它使用起来非常简单。我们不进行详细介绍,仅通过迷你教程为大家提供快速概览。

首先,登陆DALL-E 2的官网并创建一个帐户,如果您此前已经拥有OpenAI的帐户,登陆即可。需要注意的是,系统会要求您提供电子邮件和电话号码以进行验证。

声音 | 农行董事会秘书周万阜:区块链等金融科技颠覆了传统商业银行的业务逻辑和服务模式:据中新网报道,20日,中国农业银行董事会秘书周万阜在京表示,数字化农村金融服务的创新势在必行。近年来,移动互联、大数据、云计算、人工智能、区块链等金融科技,与金融加速的融合,颠覆了传统商业银行的业务逻辑和服务模式,也为了破解农村金融的服务难题提供了有效的途径。商业银行必须积极利用互联网的思维和金融科技来创新服务三农的模式,为农民提供更加便捷化、综合化、智能化的金融服务。[2018/12/21]

一旦帐户准备就绪,我们就可以开始生成图像。用户最多提供400个字符的描述性文本,AI艺术生成器将对其进行处理。根据测试,我们可以从文本提示中得到许多原创且有趣的结果。

比如,我们输入“狼群在满月时嚎叫”就收到了如下的结果。

输入“一个3D渲染的罗马士兵正在休息”则获得了以下的图像。

声音 | 王国文:区块链对信息共享可信度产生颠覆性影响:据北国网消息,第十二届物流透明管理峰会上,国家高端智库、中国(深圳)综合开发研究院供应链管理研究所所长王国文表示,颠覆性的技术对于供应链的行业会带来全方位的变革和影响,即便是现在条码技术可以做到溯源和跟踪,但区块链的出现,使信息的共享可信度、安全性和效率都出现了颠覆性的影响。[2018/10/16]

DALL-E 2为AI图像生成器的质量提供了新的基准。它与之前的同类产品相比,能够更好地理解文本描述。

其卓越的自然语言理解能力可以更严格地控制图像的风格、主题、角度、背景、位置和概念,并获得更高质量的图像和令人印象深刻的艺术形式。

那么让我们来看看DALL-E 2的工作原理。

要了解AI图像生成器的工作原理,我们首先需要了解CLIP、先验模型和解码器扩散模型(unCLIP)。

什么是CLIP?CLIP指的是对比语言图像预训练,是DALL-E 2架构中最关键的模块。

该训练基于用户可以用自然语言教计算机不同图像之间如何相互关联,并由文本和图像编码器这两个神经网络组成。

文本和图像编码器都接受了大量不同的图像文本对集合的训练。该模型分析这些图像-标题对以创建称为文本/图像嵌入的矢量表示。换句话说,CLIP充当文本(输入)和图像(输出)之间的桥梁。

声音 | 财政部副部长:区块链技术可能对银行商业模式的底层技术产生颠覆性影响:据经济观察网报道,财政部副部长廖岷表示,如果说云计算、大数据、移动金融等技术带来的是金融上层应用和业务流程的创新,区块链技术却可能对银行商业模式的底层技术产生颠覆性影响。目前金融服务各流程环节存在的效率瓶颈、交易时滞和操作风险等痛点,大多数有望借助区块链技术得到缓解或解决。[2018/9/12]

先验模型采用标题/CLIP文本嵌入,并以此为基础生成CLIP图像嵌入。

unCLIP则是使用CLIP图像嵌入生成图的原始CLIP模型的逆模型。DALL-E 2通过先验模型和unCLIP模型来创建输出。

下图大致概述了其基本过程。

如图所示,unCLIP模型创建了图像的“心理”表示。基于此,创建了原始图像。

这些“心理再现”保留了语义一致的核心特征和特点,例如“动物、物体、颜色、风格和背景等关键要素”。然而,因为扩散学习是变化的,每一次输出的图像也会有所不同。

请注意,上文只是DALL-E 2工作原理的简要表述,实现的技术细节和数学更加复杂,我们就不在这里赘述。如果您对DALL-E 2的技术规格感兴趣,可以参看OpenAI在今年早些时候发表的论文《Hierarchical Text-Conditional Image Generation with CLIP Latents》。

声音 | 经济学家贺学会:区块链项目价值体现在机器共识和社群共识的颠覆式创新:据凤凰网报道,在2018全球第五届区块链技术应用论坛上,经济学家、上海对外经贸大学金融管理学贺学会教授表示,随着区块链的兴起和发展,未来的应用将越来越多,其建立信任关系的本质推动行业价值网络的构建。他指出,区块链项目价值体现在机器共识和社群共识的颠覆式创新。[2018/7/28]

只要用户给出精确和具有描述性的文本提示,就可以通过AI艺术生成器得到多个高质量的图像,甚至在几秒钟的时间里实现画家或数字艺术家需要数小时甚至数天才能达到的质量水平。

用户可以免费查看所有这些视觉创意,无需支付场地费,也无需向创意人员和模特支付工资。

然而这也对我们的内容创作经济带来了一定的影响。

DALL-E 2使用自己对主题、风格、调色板和所需概念意义的“理解”,生成相应的图像。

每个图像最多可以产生四个变体。每一个都与原作的外观、感觉和意义相呼应,但又具有自己独特的风格。

您也可以在DALL-E 2中编辑图像,无需任何照片编辑经验。与Adobe Photoshop不同,使用DALL-E进行编辑非常简单。

例如,用户想要在火星上行走的宇航员的肖像中添加一只狗,只需要输入“在宇航员身后放一只狗”。同样,用户还可以要求程序通过放大和缩小来更改图像的视图框架,直到获得所需的结果。而就DALL-E 2的功能而言,这些只是冰山一角。

同时,根据设计,该系统无法生成涉及、血腥或元素的内容。也就是说,该程序有其合理的局限性和缺点。

DALL-E 2的输出质量很大一部分取决于用户提供的文本提示的质量,文本越具体,获得所需输出的机会就越高。然而,该系统有一些内在的局限性。

例如,当前它还不具有很精确组合性,尽管似乎会随着时间的推移而改善。这意味着DALL-E 2通常无法有意义地合并多个对象或对象属性,例如形状、方向和颜色。

同时在一些意料之外的情况下,有一些相对简单的文本,程序也可能无法充分执行。

例如,我们输入文本“一百只打扮成罗马士兵的青蛙在沙漠中行进”。即使我们尝试了多种提示变体,结果也不尽如人意。

另一个例子是当我们尝试相当简单的提示时,如“霸王龙骑着独轮车在艾菲尔塔前”。不知道为什么,程序拒绝画独轮车,取而代之的是自行车。而当我们从提示中删除“Eifel Tower”,产生预期图像则没有任何阻碍。

这些只是DALL-E 2局限性的几个例子。更令人担忧的问题本质上很复杂,可能会对公司及其用户造成严重不良影响。

OpenAI限定DALL-E 2不创建公众人物和名人的图像。事实上,它完全拒绝生成包含真实面孔或真人的图像,这是朝着防止滥用该程序迈出的重要一步。

随着DALL-E 2越来越受欢迎,版权侵权也可能成为一个大问题。OpenAI坚持认为,用户“获得了将他们使用DALL-E创建的图像商业化的全部权利,包括转载、销售和商品化的权利。”

然而,人工智能艺术生成器依赖于分析、学习人类艺术家的作品来创造艺术。因此,不能排除潜在的侵犯知识产权法的可能性,无论是否有意。

DALL-E 2完美吗?作为一项正在完善的项目,答案是否定的。

但是,正如机器学习的本质一样,随着时间的推移,该程序正变得越来越聪明,也越来越有能力。从纯技术的角度来看,DALL-E 2是AI技术演进的一大进步。

人们普遍认为人工智能系统在创意领域实际上无法超越人类,至少不会很快。但是DALL-E 2已经使这个论点受到了冲击。

然而尽管OpenAI已经采取了一系列措施来预测和防止DALL-E 2的潜在滥用,但这并非万无一失。在没有任何道德界限的情况下可以使用的AI系统将在多久后出现?需要我们保持警惕。

无论如何,我们都需要密切关注这个新兴行业。因为AI艺术生成器及其背后的技术只会在未来的岁月里变得更加普遍。

元宇宙之心

企业专栏

阅读更多

金色财经

金色财经 子木

金色早8点

去中心化金融社区

虎嗅科技

CertiK中文社区

区块律动BlockBeats

深潮TechFlow

念青

Odaily星球日报

郑重声明: 本文版权归原作者所有, 转载文章仅为传播更多信息之目的, 如作者信息标记有误, 请第一时间联系我们修改或删除, 多谢。

银河链

USDT总结:可视化 DeFi 价值流

本文以DeFi生态系统:原语和技术堆栈中介绍的技术概念为基础,概述了由该技术创建的新价值渠道。通过聚焦于单个EVM链中的价值流,来提供一个框架来识别下面三者之间的价值流: 传统金融和去中心化金融 EVM兼容链 同链上的dApp? 通过.

LTCWeb3时代 区块链技术如何撼动好莱坞传统影视?

尽管在女性和非白人代表方面取得了进展,但好莱坞仍然是一个随时准备改变的地方。传统的Web2产业不足以改变这一行业。区块链的支持者表示,区块链可以创造一个更公平、更公平的系统。电影院被大型系列大片所主导,这已经成为一种常见的说法.

UNI市场操纵和预言机操纵有什么区别?

原文:《一文读懂市场操纵和预言机操纵的区别》作者:Chainlink区块链预言机的安全性对于Web3来说至关重要,安全的预言机催生出了一系列丰富的去中心化应用,大幅降低了对手方风险并实现了流畅的价值交换.

[0:46ms0-1:387ms