作者:Joy Zhang
翻译:陈超
校对:赵茹萱本文约3000字,建议阅读8分钟
本文介绍了作者使用DALL·E 2生成了美洲驼灌篮的逼真版图片的过程。

是的,这是一只美洲驼灌篮。一份对DALL·E 2封闭测试版试验的过程、限制以及学习内容的总结。

美洲驼打篮球,DALL·E 2生成

自从我第一次看到那幅人工生成的“柴犬便当盒”(https://twitter.com/hardmaru/status/1522166259890151424)图像时,我就一直在死磕DALL·E 2。

哇哦,现在已经是颠覆性技术了。

对于不熟悉DALL·E 2的人来说,这是一个由OpenAI创建的能够利用文本生成原创图像的系统。他现在处于封闭测试阶段。我在五月初注册了等候者名单,并在七月底获得了使用权限。在测试阶段,用户收到积分(首月免费赠送50积分,之后每月15积分)后,每次花费1积分,就可以生成3-4幅图片。你可以用15美元购买115积分。

P.S. 如果你不想等,也可以免费使用DALL·E mini版本。当然,图像的质量通常会更差(由此产生了一大批DALL·E的表情包https://www.wired.com/story/dalle-ai-meme-machine/),并且每次要花大概60秒的时间(DALL·E 2只需要5秒左右)。

或许你已经看过了许多精心挑选的在线图像表明DALL·E 2是可以的。本文中,我分享了一个如何通过主题“美洲驼打篮球”来创造一幅有用的图片的详细步骤。如果你想自己尝试使用DALL·E 2或者你只是对它能干什么感兴趣的话,你会发现它很有用。

开始

DALL·E 2是科学和艺术的结合。为了阐述这一点,以下给出了“美洲驼打篮球”的结果:

 图像由作者使用DALL·E 2通过提示“美洲驼打篮球”生成

为什么DALL·E 2倾向于生成卡通图片呢?我假设在训练过程中缺乏关于美洲驼打篮球的真实图像。

我尝试再进一步地增加“逼真图像”的关键词:

手持打造有凝聚力的场景

图像由作者使用 DALL·E 2 通过提示“美洲驼打篮球的逼真照片”生成

这张美洲驼照片看起来更写实,但是整幅图看起来像一团糟的ps作品。在这个案例当中,DALL·E 2明显需要一些手持式动作来创造一个更有粘合度的场景。

提示工程,也可以解释为明确你真正想要的东西的艺术

在DALL·E的情境中,提示工程指的是设计提示线索以给出想要结果的过程。

DALL·E 2提示书就是一个绝佳的资源。它有来源于摄影和艺术的关键词组成的详细线索灵感列表。

为什么这样的关键词是必要的呢?因为从DALL·E 2中获得有用的结果是非常挑剔的(尤其是当你不确定DALL·E 2有什么用的时候)。线索如此之多,以至于一家初创公司甚至建立了一个提示线索的市场,收费1.99美元,以此来节约你自己苦思冥想所耗费的时间和金钱。

我个人最喜欢的发现是“戏剧性的背景光”。

 图片由作者使用DALL·E 2提示:“美洲驼灌篮的静态影像,低角度,极端长摄,户内,戏剧性背景光”

告诉DALL·E 2你到底想要什么是非常重要的。很显然,从内容来看,这个美洲驼穿着合时宜并不明显。DALL·E 2能够很好地识别到这个想象的场景,然而当规定了“美洲驼穿运动衫”时:

 

灌篮美洲驼,现在穿了运动衫。图像由作者使用DALL·E 2用线索“一只穿着球衣的美洲驼,灌篮的电影剧照,低角度,长镜头,室内,戏剧性的背光,高细节”生成

并没有结束。为了增加图像的戏剧性,让这个美洲驼起飞,我需要明确短语‘灌篮,行动的……’,或者我的个人喜好:“……穿运动衫的美洲驼像迈克尔·乔丹一样灌篮”:

 

迈克尔·乔丹——如果它是美洲驼,根据DALL·E 2。图像由作者使用DALL·E 2用线索“像迈克尔·乔丹这样的球衣中穿着球衣的美洲驼灌篮,低角度,从下面展示,倾斜的框架,35°,荷兰角度,极端长镜头,高细节,室内,戏剧性的背光的静态图像”

Tip:DALL·E 2仅储存了之前的历史表格里的50代。请确保你在制作过程中储存了你最喜欢的图像。

你可能已经注意到:DALL·E 2不擅长合成。

你会认为从“灌篮”的内容,美洲驼、球和篮筐的相对位置应该比较明显。通常,美洲驼灌篮的方式错了,要不就是球的位置放在美洲驼毫无希望投进的位置。虽然所有的线索元素都在,DALL·E 2并不真正‘理解’他们之间的关系。这篇文章讲得更为详细

(https://www.unite.ai/is-dall-e-2-just-gluing-things-together-without-understanding-their-relationships/)。

 图像由作者使用DALL·E 2用线索:“一只身穿球衣的美洲驼像迈克尔·乔丹一样灌篮的静态图像,低角度,从下面拍摄,倾斜的画面,35°,荷兰角度,超长镜头,高细节,室内,戏剧性的背光”

另一个表明DALL·E 2并没有真正“理解”场景的人工产品是偶尔的纹理混淆。在下面的图片里,网是由皮毛制成的(你只要想到就觉得是一个变态的场景):

 

作者使用 DALL· E 2用提示:“一张富有表现力的照片,一只美洲驼穿着球衣灌篮,像迈克尔·乔丹一样,低角度,极端广角,室内,戏剧性的背光,高细节”生成的图像

DALL·E 2努力生成逼真的人脸

根据一些资源,这可能是一种避免生成深度伪造的深思熟虑的尝试。我想这可能仅仅适用于人类,但是很明显它也适用于美洲驼。

 

作者使用 DALL·E 2用提示:“一张美洲驼穿着球衣像迈克尔·乔丹一样灌篮篮球的戏剧性照片,低角度,广角,室内,戏剧性的背光,高细节。”生成的图像

DALL·E 2的一些其他限制

这里还有我经历过的一些其他的小问题:

角度和摄影解释比较松散

无论我用过多少种‘在远处’或者‘极端长摄’,也很难发现整个美洲驼适应整个框架的图像。

在某些情况下,框架完全被忽略:

 

作者使用 DALL·E 2用提示“一只穿着球衣灌篮篮球的美洲驼的戏剧性静态图片,低角度,从下面拍摄,倾斜的框架,35°,荷兰角度,超长镜头,室内,戏剧性的背光,高细节。”生成的图像

DALL·E 2不能拼写

DALL·E 2尽力“理解”成分之间的关系这件事我想并不令人惊讶。然而,它能够在正确的上下文中尝试一些完全成形的字母:

 

作者使用 DALL·E 2用提示“像迈克尔·乔丹一样穿着球衣的毛茸茸的美洲驼灌篮,低角度,从下面拍摄,倾斜的框架,35°,荷兰角度,超长镜头,高细节,室内,戏剧性的背光。”生成的图像

面对复杂或者词汇贫乏的提示,DALL·E 2是相当难搞的

有时,使用特定方法对提示增加关键词或重写线索导致的结果常常与预想完全不同。

在这种情况下,线索(美洲驼穿运动服)的真实对象完全被忽视了:

 

现在,这是一个令人印象深刻的灌篮。作者使用 DALL· E 2用提示“低角度,长镜头,室内,戏剧性的背光,穿着球衣的美洲驼,灌篮的专业照片。”生成的图像

甚至增加术语“毛茸茸的”也会导致更差的表现,并且,多个案例表明DALL·E 2只会断句:

 

作者使用 DALL·E 2用提示“像迈克尔·乔丹一样穿着球衣的毛茸茸的美洲驼灌篮,细节丰富,室内,戏剧性的背光。”生成的图像(图像经过有意修改以模糊和隐藏人脸)。

使用DALL·E 2时,重要的是明确你想要什么,不要过度填充或添加多余的单词。

DALL·E 2转换风格的能力令人印象深刻

你需要试一试!

一旦你有了关键词对象,你可以生成可观数量的其他艺术风格的图像。

“抽象画……”

 

作者使用 DALL·E 2用提示“美洲驼穿着球衣灌篮,像迈克尔·乔丹一样,从下面拍摄,倾斜的框架,35°,荷兰角度,极长镜头,高细节,戏剧性的背光,室内,背景是一个满是人的体育场的抽象画”生成的图像

‘蒸汽波’

 

作者使用 DALL·E 2用提示“像迈克尔·乔丹一样穿着球衣的美洲驼灌篮,戏剧性的背光,充满活力的日落,蒸汽波风格静态图像”生成的图像

‘数字艺术’

 

作者使用 DALL·E 2用提示“穿着球衣的美洲驼像迈克尔·乔丹一样灌篮,从下面拍摄,倾斜的框架,35°,荷兰角度,极长镜头,高细节,戏剧性的背光,史诗般的,数字艺术”生成的图像

‘从宫崎骏动漫电影里生成截图’

 

作者使用 DALL·E 2用提示“穿着球衣的美洲驼像迈克尔·乔丹一样灌篮,来自宫崎骏动漫电影的截图”生成的图像。感谢本文中的提示。

最后的思考

经过100积分(大约13美元)以及一系列的试错,这是我最终的图像:

 

我的迷人图像。https://labs.openai.com/s/HYv3Kp8ElKDAWKHq2vs76VXu

这幅图并不完美,但是DALL·E 2试图满足80%的摘要。

大多数积分用语尝试风格,面孔以及共同协作的正确组合。

根据OpenAI的DALL·E 宣言,

“……用户拥有充分的使用权来将他们用DALL·E生成的图片进行商业化,包括印刷、出售,和推销。”

预计许多用户会快速而松散地使用这些规则。

作为内容创作者,DALL·E 2对于为博客和网站创建简单的插图,照片和图形最有用。我将用它作为Unsplash的替代品来创建看起来与其他人不同的博客封面图像。

如果你想自己用DALL·E 2,这里有一些开始前的小贴士:

  • 查阅DALL·E 2线索书!(也可以由粉丝做的提示工程表格)。

  • 为了获得你想要的图,要做好试错的准备。15免费积分听起来好像很多,但事实上并非如此。预期至少用15积分生成一幅可用图像。DALL·E 2并不便宜。

  • 在过程中不要忘记保存你最喜欢的图像。

感谢您的阅读!我非常乐意听您分享DALL·E 2的使用经验,欢迎分享任何想法或反馈。

如果你喜欢这篇文章,这里也有其他作者的一些文章你可能会喜欢:

  • 我如何使用DALL-E 2生成OctoSQL的标志

    (https://jacobmartins.com/posts/how-i-used-dalle2-to-generate-the-logo-for-octosql/)来自Jacob Martins

  • 我如何使用AI重构10幅著名的地标画

    (https://towardsdatascience.com/how-i-used-ai-to-reimagine-10-famous-landscape-paintings-3e2924e03f79)来自Alberto Romero

  • DALL-E 2可以和不可以做什么

    (https://www.lesswrong.com/posts/uKp6tBFStnsvrot5t/what-dall-e-2-can-and-cannot-do)来自Swimmer963

原文标题:

I spent $15 in DALL·E 2 credits creating this AI image, and here’s what I learned

原文链接:

https://pub.towardsai.net/i-spent-15-in-dall-e-2-credits-creating-this-ai-image-and-heres-what-i-learned-52f352912025

编辑:于腾凯

校对:王欣

译者简介

陈超,北京大学应用心理硕士在读。本科曾混迹于计算机专业,后又在心理学的道路上不懈求索。越来越发现数据分析和编程已然成为了两门必修的生存技能,因此在日常生活中尽一切努力更好地去接触和了解相关知识,但前路漫漫,我仍在路上。

翻译组招募信息

工作内容:需要一颗细致的心,将选取好的外文文章翻译成流畅的中文。如果你是数据科学/统计学/计算机类的留学生,或在海外从事相关工作,或对自己外语水平有信心的朋友欢迎加入翻译小组。

你能得到:定期的翻译培训提高志愿者的翻译水平,提高对于数据科学前沿的认知,海外的朋友可以和国内技术应用发展保持联系,THU数据派产学研的背景为志愿者带来好的发展机遇。

其他福利:来自于名企的数据科学工作者,北大清华以及海外等名校学生他们都将成为你在翻译小组的伙伴。

点击文末“阅读原文”加入数据派团队~

转载须知

如需转载,请在开篇显著位置注明作者和出处(转自:数据派ID:DatapiTHU),并在文章结尾放置数据派醒目二维码。有原创标识文章,请发送【文章名称-待授权公众号名称及ID】至联系邮箱,申请白名单授权并按要求编辑。

发布后请将链接反馈至联系邮箱(见下方)。未经许可的转载以及改编者,我们将依法追究其法律责任。

点击“阅读原文”拥抱组织

独家 | 为DALL·E 2花了15美元创作这幅AI图像以后,我学到了……相关推荐

  1. 侍魂服务器维护补偿,侍魂胧月传说:套路!花了15万元玩强化类氪金游戏总结出来的经验...

    玩侍魂胧月传说也有一段时间,关于强化我有话要说.在这里我用白话说一遍. 我玩强化类氪金游戏很多,也就花了15万,不算多.一些经验给大家.因为我发现路数都是一样的. 1-个人认为强化几率是有的.因为容错 ...

  2. 为了快 0.00007 秒,有家交易公司花 1400 万美元买了块地

    为了快 0.00007 秒,有家交易公司花 1400 万美元买了块地 2017-05-19 好奇心日报 人人宽客 对于高频交易公司来说,2/3 光速还是太慢了 眨眼 0.4 秒,常被形容快,但有家公司 ...

  3. (转)为了快 0.00007 秒,有家交易公司花 1400 万美元买了块地

    https://mp.weixin.qq.com/s/sBw2CTHQIva–Ne8jyXN9Q 为了快 0.00007 秒,有家交易公司花 1400 万美元买了块地 2017-05-19 好奇心日报 ...

  4. 库里花18万美元买一个数字头像 而这可能只是NFT爆火的前奏

    原标题:库里花18万美元买一个数字头像 而这可能只是NFT爆火的前奏 来源:硅星人 "小学生"库里最近找到了除了爆米花之外的另外一个心头好--NFT数字头像.周末,库里把自己的Tw ...

  5. 为什么要free释放内存_为什么在Free Code Camp上列出一份工作要花1,000美元?

    为什么要free释放内存 by Michael D. Johnson 迈克尔·约翰逊(Michael D.Johnson) 为什么在Free Code Camp上列出一份工作要花1,000美元? (W ...

  6. 为了学习数据库索引,我们花了5000美元

    译者 | 王雪迎 出品 | CSDN(ID:CSDNnews) ​需求背景 我们正在构建一个SDK,它通过在正确的时间向正确的人展示正确的产品,从而帮助应用程序开发人员增加收入. 为了提供这项服务,我 ...

  7. 腾讯音乐路演PPT曝光:发行区间13至15美元 下周上市

    雷帝网 雷建平 12月7日报道 腾讯音乐日前更新招股书.招股书显示,腾讯音乐发行区间定为13美元至15美元,拟发行ADS股份8200万股,募集10.66亿美元至12.3亿美元. 腾讯音乐预计12月11 ...

  8. 【Python 3.7】电影票:有家电影院根据观众的年龄收取不同的票价:不到3岁的观众免费; 3~12岁的观众为10美元;超过12岁的观众为15美元。请编写一个循环,在其中询问用户的年龄,指出其票价。

    [Python 3.7]电影票:有家电影院根据观众的年龄收取不同的票价:不到3岁的观众免费: 3~12岁的观众为10美元:超过12岁的观众为15美元.请编写一个循环,在其中询问用户的年龄,指出其票价. ...

  9. 全球首位 AI 律师出庭,花 100 万美元找“传话筒”!网友:头脑正常的人谁会同意?...

    整理 | 郑丽媛 出品 | CSDN(ID:CSDNnews) 在 ChatGPT 的热潮下,近来在国内外科技网站上,各类 AI 话题几乎成为了"热搜常驻户",其中不乏一些看起来极 ...

最新文章

  1. 用c语言编写心里测试,求各位大神赐教!我做了一个“心理测试的答题卷”编程,总共有1...
  2. Centos7环境安装Kibana5.2.2
  3. Android数据存储之GreenDao 3.0 详解
  4. 如何做深ViT模型?NUS、字节:引入Re-attention机制,实现强大性能
  5. [HAOI2015]树上操作
  6. 如何查看Linux是32位还是64位
  7. 一篇特别长的总结(C专家编程)
  8. 解决VS2019窗体设计器不显示
  9. c 怎么连接mysql博客_C连接MySql数据库
  10. Struts 2读书笔记-----使用Struts 2的输入校验
  11. cmd windows 命令sleep_最实在的9个黑客命令!确定不学习下?
  12. DB2造数据存储过程
  13. 程序员听爵士,架构师学做交响指挥
  14. MySQL引擎详解(一)——引擎基本原理和操作
  15. 计算身份证号码的校验码Python
  16. 科研的常用软件高效神器
  17. 计算机的字体要怎么删除,win7字体删不掉怎么办?教你删除win7多余字体方法
  18. 判断DataTable中否存在指定列
  19. 命令 修复损坏的 Ubuntu 系统 ,不用重装
  20. matlab绘图修改字体大小,matlab绘图中设置字体及图片大小

热门文章

  1. 随机数生成器【LCG算法】
  2. 软件过程与管理:configuration management
  3. cook_fighter iOS 小总结 推送通知
  4. 按shift delete删除的文件还能恢复吗?文件恢复教程
  5. carx2服务器维护不足什么问题,carx2赛车漂移
  6. 智能床垫到底有多智能-新导智能
  7. 图像拼接缝融合之加权融合
  8. 用51单片机做一个物联网温度计+远程开关
  9. 轻量级开发编辑器 sublime text 3 使用心得
  10. 关于ATM渗透与欺诈的知识点Part 1