MMagic AIGC 工具箱开源项目

我要开发同款
匿名用户2023年06月19日
127阅读
开发技术Python
所属分类人工智能、机器学习/深度学习
授权协议Apache-2.0

作品详情

MMagic(Multimodal Advanced, Generative,and Intelligent Creation)是一个供专业人工智能研究人员和机器学习工程师去处理、编辑和生成图像与视频的开源AIGC工具箱。

MMagic允许研究人员和工程师使用最先进的预训练模型,并且可以轻松训练和开发新的定制模型。目前MMagic支持多种图像和视频的生成/编辑任务。

主分支代码的最佳实践基于 Python3.8+ 和 PyTorch1.9+ 。

MMagic支持各种基础生成模型,包括:

无条件生成对抗网络(GANs)

条件生成对抗网络(GANs)

内部学习

扩散模型

还有许多其他生成模型即将推出

MMagic支持各种应用程序,包括:

图文生成

图像翻译

3D生成

图像超分辨率

视频超分辨率

视频插帧

图像补全

图像抠图

图像修复

图像上色

图像生成

还有许多其他应用程序即将推出

主要特性

SOTA算法

MMagic提供了处理、编辑、生成图像和视频的SOTA算法。

强有力且流行的应用

MMagic支持了流行的图像修复、图文生成、3D生成、图像修补、抠图、超分辨率和生成等任务的应用。特别是MMagic支持了StableDiffusion的微调和许多激动人心的diffusion应用,例如ControlNet动画生成。MMagic也支持了GANs的插值,投影,编辑和其他流行的应用。请立即开始你的AIGC探索之旅!

高效的框架

通过OpenMMLab2.0框架的MMEngine和MMCV,MMagic将编辑框架分解为不同的组件,并且可以通过组合不同的模块轻松地构建自定义的编辑器模型。我们可以像搭建“乐高”一样定义训练流程,提供丰富的组件和策略。在MMagic中,你可以使用不同的APIs完全控制训练流程。得益于 MMSeparateDistributedDataParallel,动态模型结构的分布式训练可以轻松实现。

 

声明:本文仅代表作者观点,不代表本站立场。如果侵犯到您的合法权益,请联系我们删除侵权资源!如果遇到资源链接失效,请您通过评论或工单的方式通知管理员。未经允许,不得转载,本站所有资源文章禁止商业使用运营!
下载安装【程序员客栈】APP
实时对接需求、及时收发消息、丰富的开放项目需求、随时随地查看项目状态

评论