从 120 亿参数到一句话出图:DALL·E 三代演进编年
DALL·E 是 OpenAI 推出的文本生成图像模型系列,名字由超现实主义画家萨尔瓦多·达利与皮克斯动画角色瓦力拼接而来。从 2021 年初代惊艳学界的「牛油果扶手椅」,到 2023 年第三代直接住进 ChatGPT 对话框,这个系列用三年时间完成了文生图从实验室演示到全民创作工具的跨越[6]。本页按时间顺序梳理三代的关键节点、能力差异与提示词写法。
适用读者:想系统了解 DALL·E 脉络的产品经理、设计师与 AI 爱好者 · 全文含结构化数据
三代演进时间线
初代 DALL·E:概念验证的惊鸿一瞥
DALL·E 2:分辨率翻四倍,全民开放
DALL·E 3:搬进 ChatGPT 的对话框
四张能力卡:它能替你做什么
文生图
一句中文或英文描述生成对应画面,支持横版、竖版与方形的常见比例,适合插画、海报底稿与概念探索。
局部重绘
圈选画面中不满意的区域并用文字描述新内容,其余像素保持不动,改招牌文字、换背景元素时特别高效。
画布扩展
把竖版照片向左右延展成横幅,或让一张小图长成完整场景,模型会顺着原画风补全边界之外的世界。
风格变体
上传任意图片生成多个构图相似、细节各异的衍生版本,是找灵感、做方案对比的低成本手段。
与 ChatGPT 集成意味着什么
过去使用文生图工具像是在「念咒语」:要背一堆质量词、镜头词、艺术家名,才能换来勉强及格的画面。DALL·E 3 把大语言模型放在了用户和扩散模型中间——你说「帮我画一张适合公众号封面的图,主题是秋天的图书馆」,ChatGPT 会先追问细节偏好,再把你的口语扩写成结构完整的提示词交给模型渲染。
对普通用户的实际影响有三层:一是上手成本几乎归零,会打字就会出图;二是迭代效率提高,改需求不需要重写整段提示词;三是产出可控性增强,语言模型的常识补全减少了「驴唇不对马嘴」式的理解偏差。[1]
提示词写法技巧清单
- 主体先行:第一句话锁定核心对象与动作,例如「一只橘猫趴在钢琴键盘上」,再补充环境细节。
- 风格锚点放句尾:水彩、胶片颗粒、像素艺术、等距 3D 渲染等风格词置于句末,权重更稳定。
- 交代视角与景别:俯拍、特写、广角全景这类摄影词汇能直接改变构图,比反复重抽更省额度。
- 光线即情绪:黄昏逆光、霓虹夜雨、烛光暖调等光照描述对氛围的影响远超一般形容词。
- 让 ChatGPT 先扩写:先用大白话说清意图,接受它给出的润色版提示词,再手动删掉不需要的部分。
- 负向约束用自然语言:直接写「画面中不要出现文字和水印」,比堆砌参数更符合该系列的解析习惯。
- 同一提示词多抽几次:扩散模型每次采样都不同,先批量生成再择优,胜过反复微调文案。
- 单变量迭代:每次只改一个要素(如只换风格词),才能判断哪个改动真正起了作用。
三代速查表
| 维度 | DALL·E 初代(2021) | DALL·E 2(2022) | DALL·E 3(2023) |
|---|---|---|---|
| 架构思路 | GPT-3 式自回归,离散图像令牌[3] | unCLIP:CLIP 嵌入先验加扩散解码[4] | 在第二代基础上强化语义对齐与安全栈 |
| 输出分辨率 | 256×256 与 512×512 | 1024×1024 | 延续高分辨率并优化比例选项 |
| 标志性能力 | 罕见概念组合的概念验证 | 重绘、扩展、变体三件套 | ChatGPT 内对话式出图与自动扩写提示词 |
| 获取方式 | 未公开,仅研究展示 | 独立网页产品,后并入 ChatGPT 体系 | ChatGPT Plus/Enterprise 及 API[1] |
| 溯源措施 | 无 | 无 | C2PA 凭证与 SynthID 水印[2] |
常见问题
OpenAI 曾向免费用户提供限量额度,付费订阅则享有更高上限与更稳定的访问。额度政策多次调整,当前的具体配额以官方定价页为准。[1]
按 OpenAI 服务条款,用户通常拥有所生成内容的使用权并可用于商业目的,但需自行确保不侵犯他人权利、遵守内容政策;条款会更新,商用前建议查阅最新版本。
手部姿态自由度极高而训练样本中的手往往被遮挡,文字则要求模型同时掌握字形与排版,两者都是扩散模型的固有难点。DALL·E 3 已明显改善英文短文本渲染,复杂长句仍建议后期用设计软件补字。
DALL·E 3 强在语义理解与对话式修改,适合把模糊想法快速落成可用的图;Midjourney 以美学风格见长,适合追求视觉冲击的成品图。预算允许的话,多数创作者会两个都留。
有。OpenAI 此后在 GPT 系列中推出了更新的原生图像生成能力,DALL·E 3 逐步成为历史版本但仍保留相关页面供了解。本页聚焦 DALL·E 系列本身,最新产品动态以其官方公告为准。[1]
参考资料
- 来源:OpenAI 官方——DALL·E 3 发布公告与产品页 openai.com/index/dall-e-3
- 来源:OpenAI 官方博客——推进内容溯源:C2PA 内容凭证与 SynthID 水印 openai.com/index/advancing-content-provenance
- 来源:arXiv 论文 2102.12092——Zero-Shot Text-to-Image Generation(DALL·E 初代) arxiv.org/abs/2102.12092
- 来源:arXiv 论文 2204.06125——Hierarchical Text-Conditional Image Generation with CLIP Latents(DALL·E 2 / unCLIP) arxiv.org/abs/2204.06125
- 来源:arXiv 论文 2103.00020——Learning Transferable Visual Models From Natural Language Supervision(CLIP) arxiv.org/abs/2103.00020
- 来源:维基百科 DALL-E 词条——三代发布时间线与开放历程 en.wikipedia.org/wiki/DALL-E