phodal /understand-prompt
【🔞🔞🔞 内含不适合未成年人阅读的图片】基于我擅长的编程、绘画、写作展开的 AI 探索和总结:StableDiffusion 是一种强大的图像生成模型,能够通过对一张图片进行演化来生成新的图片。ChatGPT 是一个基于 Transformer 的语言生成模型,它能够自动为输入的主题生成合适的文章。而 Github Copilot 是一个智能编程助手,能够加速日常编程活动。
★ 5,666⑂ 444👁 53⑃ 0● 11▤ 0
+0
日增长
5,666
stars
444
forks
53
watchers
0
prs
11
issues
0
releases
README
理解 Prompt:基于编程、绘画、写作的 AI 探索与总结
欢迎使用集成了这些模式的工具:https://github.com/prompt-engineering/click-prompt
目录:
1. 理解 Prompt
1. 图形生成:如何描述一张照片??
1. 文本描述:第一个示例
2. 精准控图:结合 ControlNet
3. 更多的模型集:与二次元世界的照片(18 禁)
4. 小结
2. 文章:如何围绕特定主题思考?
1. 情境:如何用 ChatGPT 写一篇文章,以如何用 ChatGPT 写一篇文章?
2. 构建更完整的上下文
3. 构建框架(frameworks)
4. 其它小建议:
3. 代码生成:GitHub Copilot
1. 完整示例:DDD + ChatGPT + Copilot
2. 其它:代码生成开源模型
4. 总结:AI 就像占卜
5. 其它:Macbook Pro 的吐槽
1. AI 生态不友好
6. 本文相关资源
2. Prompt 编程:打通低代码的最后一公里?
1. 引子
2. Prompt 编程:真正的无代码
1. Prompt 编程特性 1:从需求到代码的直接转换
2. Prompt 编程特性 2:代码只是临时产物
3. Prompt 编程特性 3:次序化的分解框架
4. Prompt 编程特性 4:语言即语言
3. Prompt 编程 Demo:引导 ChatGPT 创建语言与建模
1. 阶段一:让 ChatGPT 与你学 DDD
2. 阶段二:完整设计 + DSL 生成
3. 阶段三:代码生成与低代码
4. 小结
4. 实时的软件生成:自然语言即 Prompt,Prompt 即代码
1. 特征 1:自然语言即语言,语言即软件
1. 特征 2:生成式的软件架构
1. 特征 3:自底向上生成
5. 当前的挑战
6. 总结
3. 如何利用好 AIGC ?从 AI 绘画的演进与 ChatGPT 现状出发
1. 如何构建高质量的 AI 图形:精准控线 + 个人模型
1. 严格化验收条件:Negative Prompt
2. 构架蓝图:ControlNet 精准控线
3. 轻量小模型:DreamBooth 个人模型与风格化
4. 完善与细化:局部绘制 —— InPaint 的手部修复
5. 小小的总结:严格化验收条件 + 构架蓝图 + 轻量小模型 + 完善与细化
2. 个人 AI 策略:构架 + 磨炼 + 小模型
1. 策略 0:拥抱变化
2. 策略 1:强化构架能力
3. 策略 2:构建领域小模型
3. 策略 3:探索与磨炼技巧
4. 小结
文件目录:
- Stable Diffusion 简易教程:Stable Diffusion
- 从 AI 绘画看 AIGC 的未来
- Jupyter 练习 AI 相关部分
- translate.ipynb 中文翻译英文
- codeai.ipynb 代码自动生成
基于编程、绘画、写作的 AI 探索与总结:理解 Prompt
PS:本文的图形部分因 “真实世界原因”,包含一些年龄受限的词汇,建议未成年人在监护人陪同下阅读。
就当前节点(2023.02.22)而言,我虽然研究过一段时间传统的机器学习,但是并不擅长深度学习等领域,所以很多 AI 领域相关的词汇,我是不擅长的,只为自己总结一下,方便在未来更新自己的认识。
内容主要是结合我过去擅长的编程、写作、绘画展开的:
1. 绘画:text 2 image。结合 Stable Diffusion 讲述一张图片的演化。
2. 写作:chat 2 article。结合 ChatGPT 讲述围绕特定主题的内容创作。
3. 编程:comment 2 code。结合 GitHub Copilot 如何加速日常的编程活动。
总体来说,AI 相当于美国队长的实力,遇强则强,遇弱则弱,关键其实在于 Prompt。所以,如何更好地完善 prompt,实现 prompt 工程就是:如何更好地使用 AI 的基础。
Prompt 是一种文本输入方式,用于与自然语言处理模型(例如GPT)进行交互。Prompt 是一个短语或一句话,可以启动模型并产生与 Prompt 相关的输出。这个输出可以是一个单独的单词、一句话,或者是一段完整的段落。它可以控制模型的行为,使其产生特定的结果。
所以,如何更好地完善 prompt,实现 prompt 工程就是:如何更好地使用 AI 的基础。所以,在这篇文章里,我将介绍:
1. 用 text 2 image 来展示如何演进 prompt
2. 用 text 2 article 来展示充足 prompt 的优点
3. 结合 GitHub Copliot 来实现 prompt 完成工作
PS:感谢我老婆提供的照片。
图形生成:如何描述一张照片??
人类需要思考第一个问题:如何描述一张照片?在不关心感受的情况下,我们关注于主体、背景、颜色、构图等。
现在,我们脑海中出现一个场景:
!
接着,用文本来抽象它。在这里,我结合一下 Stable Diffusion 来讲述一下过程。
文本描述:第一个示例
生成 prompt:
- phodal: 我想写一段话描述一张照片,帮我美化一下:一年轻女子穿着裙子,背对着镜头,在海边看着日落,太阳已经到地平线下面了,她的头发在风中飘动。
- ChatGPT: 这张照片中的场景令人心醉,一位年轻女子穿着一条裙子,站在海边,背对着镜头,凝视着地平线下的夕阳。太阳已经沉入了海面,一片金黄色的光芒在海面上弥漫,照亮了整片海洋,仿佛这个时刻被定格在了时间的某个角落里。女子的头发随着微风轻轻飘动,轮廓被余晖映照得柔和而温暖。她的目光凝视着远方,仿佛在思考着生命的意义和无尽的未来。这张照片中蕴含着一种深刻的内涵,让人感受到时间和自然的力量,也让人思考着自己在这个宏大而美丽的世界中的角色和意义。
如果转换成英语的话:
A young woman wearing a flowing dress stands at the edge of the sea, her back turned to the camera as she gazes upon
the glow of the setting sun. The ocean stretches out before her in all its grandeur, an