stable-diffusion-models.md

stable-diffusion-models

收集有关stable diffusion的各种模型、应用。

1 应用

	名称	功能	论文	Github	使用情况
1	SD-XL	文生图	2307.01952	github	+
2	Llama 2 7B Chat	chatbot, LLM, Llama 2	2307.09288	github	+，中文效果差了点
3	Zeroscope V2	文生视频			+，只有3s，效果一般
4	Shap-E	文转3D，图转3D	2305.02463	github	+，效果差
5	ControlNet V1.1	文生图、图生图	2302.05543	github github	+，多种model切换
6	Rerender	视频生视频			++，可用，目前只有封面+3s
7	ModelScope Text To Video Synthesis	文生视频	2303.08320	github	2-3s，效果一般
8	ELITE	文生图	2302.13848	github	+，可以把选中的物和prompt提示的结合在一起，可用
9	DDNM-HQ	照片修复、彩色	2303.00354 2212.00490	github	demo不可用，但colab应该可以
10	ControlNet + Anything v4.0	文生图、图生图	2302.05543	github	demo不可用
11	ODISE	多物体识别	2303.04803	github	可用，结果为英文，+++
12	BLIP2 with transformers	识物	2301.12597	github	demo不可用
13	Tune-A-Video Inference	文生视频、视频生视频	2212.11565	github	demo不可用，colab也不可用，issue
14	Tune-A-Video Training UI	同上	2212.11565	github	同上
15	CutLER	物体捕捉，没有识别	2301.11320	github	demo可用
16	MaskCut	物体捕捉，没有识别	2301.11320	github	同上
17	Multiresolution Textual Inversion	文生图	2211.17115	github	效果觉得一般
18	CogVideo	文生视频	2205.15868	github	demo可用，排队太久
19	AnimeGANv3 PortraitSketch	图生图，仅素描		github	仅素描，效果还可
20	MangaLineExtraction_PyTorch	漫画线提取，去色		github	效果还行，只提取边线，去掉颜色，功能单一
21	ViTPose Video	姿态估计	2204.12484	github	可用，通用的姿态估计开源工具箱
21	ViTPose	同上	2204.12484	github	同上
22	Text2Human	图文生人物	2205.15996	github	可用，慢了点
23	MMDetection	多物体识别		github	可用
24	HairCLIP	换发型与颜色	2112.05142	github	可用，较快，++
25	Portrait Style Transfer	换衣服	2203.13248	github	不是很明朗
26	StyleGAN-Human	换衣服	2204.11823	github	不是很明朗
27	StyleGAN-Human Interpolation	生成衣服	2204.11823	github	功能固定，GAN
28	StyleGAN-Human	生成衣服	2204.11823	github	功能固定，GAN
29	GAN-Control	换年龄、发型、发色	2101.02477	github	功能固定，GAN
30	Manga OCR	漫画配字识别		github	可用
31	Mediapipe Pose Estimation	面部识别	2006.10204	github	可用
32	Mediapipe Face Detection	面部识别	1907.05047	github	可用
33	Mediapipe Face Mesh	面部识别	1907.06724	github	可用
34	Anime2Sketch	漫画线提取，去色	2104.05703	github	可用，简单
35	TADNE Image Viewer	生成动漫图			不可用，错误
36	TADNE Interpolation	生成动漫图			不可用，错误
37	Insightface SCRFD	人脸检测	2105.04714	github	可用
38	Insightface Person Detection	人脸检测	2105.04714	github	可用
39	Self-Distilled StyleGAN	相似图片集	2202.12211	github	GAN
40	StyleGAN2	相似图片集	1912.04958	github	GAN
41	Projected GAN	相似图片集	2111.01007	github	GAN
42	StyleGAN3	相似图片集	2106.12423	github	GAN
43	StyleGAN-XL	相似图片集	2202.00273	github	GAN
44	1adrianb Face Alignment	人脸检测	1703.07332	github
45	Portrait Style Transfer with DualStyleGAN	变脸	2203.13248	github	转为各种风格的漫画脸，++
46	StyleSwin	相似图片集	2112.10762	github	GAN
47	Age Estimation APPA REAL	人脸检测		github
48	Anime_face_landmark_detection	卡通人脸检测		github
49	Lbpcascade_animeface	卡通人脸检测		github
50	Yolov5_anime	卡通人脸检测		github
51	Bizarre Pose Estimator Segmenter	卡通轮廓识别	2108.01819	github
52	Yet Another Anime Segmenter	卡通轮廓识别		github
53	Bizarre Pose Estimator Tagger	人物动作识别	2108.01819	github	++
54	DeepDanbooru	人物动作识别		github
55	Danbooru Pretrained	人物动作识别		github
56	StyleGAN3 Anime Face Generation (exp002)	生成动漫			GAN
57	StyleGAN3 Food101	生成动漫			GAN
58	StyleGAN3 Anime Face Generation (exp001)	生成动漫			GAN
59	latent-upscaler	图片无损放大
60	facefusion	时尚换脸		github	cuDNN，CPU win可用
61	magicanimate	图片转运动形式		github	排队排太久，超过10分钟，几乎等不到
62	DemoFusion	画面增强器、2d变3d	2311.16973	github	排队排太久，几乎等不到
61	playground	不错的图片生成
61	AItube	AI作品展示
61	marigold	热成像	2312.02145	github
62	SEINE	图转视频	2310.20700	github	可用，默认2s
63	tryemoji	emoji转换			可用，可下载
64	OutfitAnyone、web	换衣效果		github	运行错误，繁忙
65	OutfitAnyone	图转动画		github	只有显示，没找到部署运行
66	DMV3D	图转3D模型	2311.09217	github	无运行
67	Video-LLaVA	图像+视频理解	2311.10122	github	可运行，模型文件
68	LanguageBind	图像/视频转文本	2310.01852	github	可用，此为对比图像与文本描述的相似度，模型文件
69	OpenCLIP	图生文	2103.00020	github	未运行，从openAI开源出来的，colab可试用
70

2 数据集

	名称	功能	论文	Github	使用情况
1	runway	文/图/视频生视频			要注册，免费37s可用，每次3s

3 网站产品

	名称	功能	论文	Github	使用情况
1	runway	文/图/视频生视频			要注册，免费37s可用，每次3s
2	tusiart.com	免费在线生图的 AI 模型分享社区		资源收集	吐司AI，开放的模型分享社区，所有模型不仅能下载还能在线运行。每天可免费生成50-100张图，非常精美，推荐。
3	clipdrop	取消裁剪			Clipdrop是一款在线图片智能补全工具，其中的Uncrop功能可以实现扩图。虽然免费次数有限，但效果还不错，可以考虑试试。需翻墙
4	ishencai	神采AI			神采AI-尺寸外扩是9月上线的新工具，生成速度和效果都很不错。不仅操作简单，而且可以输入提示词来控制画面效果，非常推荐哦。
5	seaart	海艺AI			类似吐司AI的网站，需翻墙。每日免费使用。
6	aitubo	aitubo图片生成			类似吐司AI的网站，需翻墙。使用名额。