这是你的AIGC探索茶馆
更新记录:
-
v0.1 2022.10.15
-
v0.2 2022.11.22
专栏链接： https://xiaobot.net/post/7aa026e7-b23a-4d2f-84d3-0b0840688099
旅行者，欢迎光临，小二有礼了。
这是一个可以探索的茶馆，我会不定期的把AIGC相关的应用都分类更新到下面。有感兴趣的项目，旅行者可先自行了解和试用，后面我会挑几个应用重点分析。
AIGC 应用目录
文本生成
AI写诗
-
九歌——人工智能诗歌写作系统 清华NLP组出品
-
小冰现代诗歌创作系统 微软小冰出品
-
自动对对联 王斌老师作品
AI写作
-
copy.ai 自动文案生成
-
jasper.ai 文案辅助生产
-
AI Book Writing with GPT3 & Dalle-mini 使用GPT3和Dalle生成书
-
GALACTICA 科研方向的语言模型
AI影视创作
- 故事与分镜生成工具 结合 GPT-3 和 Stable Diffusion，搭建在Google Sheet上的故事与分镜生成工具。只需要录入一句话即可自动完成所有内容生成
音频生成
-
OpenAI Whisper 可以将音频中的语言信息转换为文字，不只是翻译，此项目是开源的
-
AudioGen 根据文本生成音频
-
Mubert AI生成音乐
AI辅助工作
- www.adept.ai 可以通过自然语言操作搜索，也可以操作表格
AI代码生成：
图像生成
AI画画
-
Midjourney 目前效果最好的生成器，还以社区运营最早出名
-
stable diffusion Stability.ai发布的开源版本扩散模型，目前很多工具都是基于此版本
-
Imagen Google，文本生成画
-
DreamFusion Google，文本生成3D图像
-
Magic3D 文本生成3D模型
Prompts Engineering
每个平台的Prompts其实不太一样，需要学习
-
https://lexica.art/ 图像生成的搜索引擎，可以得到Prompts继续优化
-
https://labs.openai.com/collection OpenAI自己家的collection，也有Prompts
-
PromptsBase Prompts市场
AI辅助设计
-
Artbreed 可以通过Prompts+图像指导AI创作，从而获得更可控的结果
-
Figma **Ando AI插件** 使用提示词生成渲染及变体
-
getalpaca 自动图像生成和补全
-
Novel AI 生成二次元漫画，质量很高。目前他们模型已经泄露，网上很多工具基于他们的偶像
-
AI Render Blender的Stable Diffusion插件
-
carefree-creator 开源AI创作工具
视频生成
视频生成
-
https://makeavideo.studio MetaAI的Make-a-Video视频生成。可以输入参考视频，模型输出相关变体视频
-
https://imagen.research.google/video/ Google的Imagen视频生成版本
-
Runwayml.com 辅助视频制作，效果很强
-
phenaki.video 随时间变化的文本生成视频
-
InfiniteNature-Zero: 从一张照片生成3D航拍视频
动画生成
-
3D动画算法制作 和大模型类似，就是去掉一部分帧，然后利用模型来补充帧
游戏生成
-
音频驱动手势生成 英伟达的 Audio2gesture，目前是驱动虚拟人
-
文本驱动动作生成 文本生成动作，还有MotionDiffuse，SPACEx英伟达最新的论文，驱动嘴型，表情和头部运动
-
Game-as-neural-network 游戏即神经网络的实验性Demo
AIGC 模型目录
GPT3：OpenAI的语言模型
- GPT3 demo 提供300多个GPT3 demo的搜索
Dall·e&Dall·e2：OpenAI的text2img模型
官网：https://openai.com/dall-e-2/
-
dalle-mini huggingface托管的mini版本，效果不太好
-
craiyon Dalle开源版本
Diffuse Model： 扩散模型
stable-diffusion
官网： https://github.com/CompVis/stable-diffusion
微调模型demo：https://huggingface.co/spaces?sort=likes&search=stable-diffusion
优化：
- Diffusion预训练成本降低6.5倍，微调硬件成本降低7倍**！**mp.weixin.qq.com
Dreambooth
官网：https://dreambooth.github.io/
Disco-Diffusion
官方：https://github.com/alembics/disco-diffusion