阿里妈妈新开源:AI图像修复模型,语言描述即可变换风格!

发布时间:2024-10-01 05:37  浏览量:1

【ITBEAR】阿里巴巴旗下阿里妈妈创意团队近日宣布,他们已成功开源一款全新的AI图像修复模型——FLUX-Controlnet-Inpainting。该模型融合了FLUX.1-dev与ControlNet两大技术的精华,前者以出色的图像生成质量闻名,后者则擅长精准操控图像修复流程。

这款新型模型在庞大的1200万张laion2B图像数据集及阿里内部数据集上进行了深度训练,支持高达768x768的分辨率,展现出对损坏或缺失图像区域的高质量修复能力。其独特之处在于,能够解析用户的自然语言描述,并根据这些描述进行精细的图像修复操作,如添加新物体、移除不需要的元素或改变整体风格。

目前,FLUX-Controlnet-Inpainting正处于Alpha测试阶段,阿里妈妈创意团队透露,他们将不断优化模型性能,并计划在未来推出更多更新版本。对于想要体验这一技术的用户来说,好消息是该模型已在Hugging Face平台上开源,只需通过pip安装diffusers库,并从GitHub上克隆相关项目代码,即可轻松上手。

标签: 模型 开源 图像

外部推荐