近日,阿里妈妈创意团队开源了一款名为FLUX-Controlnet-Inpainting的AI图像修复模型。该模型基于FLUX.1-dev模型架构,并在1200万张laion2B图像和阿里内部数据集上进行了训练,分辨率高达768x768,能够对图像进行高质量的修复。

image

这款工具不仅继承了FLUX.1-dev模型的高质量图像生成能力,更巧妙地融合了ControlNet的优势。它能够根据图像的边缘、线稿、深度图等信息进行精准修复,在指定区域生成与周围环境和谐一致的内容,为受损或缺失的图像部分带来新生。

这款模型的一大亮点是它能够理解用户的语言描述,并根据描述对图像进行精准修复,例如根据用户提供的文字描述,在图像中添加或移除物体,甚至改变图像的风格。

FLUX-Controlnet-Inpainting模型现已在Hugging Face平台开源,并提供了详细的使用教程和示例代码,用户可以通过pip安装diffusers库,并从GitHub克隆项目代码,即可快速体验该模型的强大功能。

阿里妈妈创意团队表示,目前发布的FLUX-Controlnet-Inpainting模型还处于alpha测试阶段,未来还将持续优化模型性能,并计划在未来发布更新版本。

项目地址:https://github.com/alimama-creative/FLUX-Controlnet-Inpainting

工作流下载地址:https://huggingface.co/alimama-creative/FLUX.1-dev-Controlnet-Inpainting-Alpha/resolve/main/images/alimama-flux-controlnet-inpaint.json