当前位置: 首页 > news >正文

无需抠图!Qwen-Image-Layered 一键分解图像图层,支持图层级精准编辑

github: https://github.com/QwenLM/Qwen-Image-Layered?tab=readme-ov-file
huggingface 应用:
https://huggingface.co/spaces/Qwen/Qwen-Image-Layered


Qwen-Image-Layered 是一个专注于图像分层分解与编辑的仓库,核心功能是将输入图像分解为多个带透明通道(RGBA)的图层,从而支持对每个图层进行独立操作(如重新着色、替换内容、缩放等),实现高保真且一致的图像编辑。

核心功能

  1. 图像分层分解:将单张图像自动拆解为多个 RGBA 图层,每个图层物理隔离语义或结构组件(如前景物体、背景、文本等)。
  2. 图层独立编辑:分解后的图层可单独修改,不影响其他内容,支持重着色、替换、删除、缩放等操作。
  3. 便捷部署与使用:提供 Gradio 可视化界面,支持一键分解图像并导出为 PPTX 文件(方便图层编辑),以及专门的图层编辑工具。

demo

图层分解与应用


编辑第一层:

编辑第二层:

编辑第三层(修改OCR字符):

删除层:

resize尺寸:

移动obj:

自定义分层数+further decomposition

仓库结构

Qwen-Image-Layered/ ├── LICENSE # Apache License 2.0 许可证 ├── README.md # 项目说明、快速开始及使用指南 ├── assets/ │ └── test_images/ # 测试用例图像 └── src/ ├── app.py # 启动图像分解与PPTX导出的Gradio界面 └── tool/ └── edit_rgba_image.py # 启动图层编辑的Gradio界面

关键特性

  • 分层表示优势:通过物理隔离图层,从根本上保证编辑的一致性(如修改某图层颜色时不影响其他内容)。
  • 支持基础操作:天然适配缩放、重定位、删除等基础编辑操作,且不易失真。
  • 文本提示辅助:可通过文本描述图像整体内容(包括被遮挡元素)辅助分解,但不直接控制单个图层的语义。
  • 模型限制:当前权重主要优化“图像到多RGBA图层分解”任务,“文本到多RGBA图层生成”性能有限。

使用方式

  1. 环境准备

    • 需安装transformers>=4.51.3(支持 Qwen2.5-VL)
    • 安装最新版diffuserspython-pptx
      pipinstallgit+https://github.com/huggingface/diffusers pipinstallpython-pptx
  2. 快速开始(代码示例)

    fromdiffusersimportQwenImageLayeredPipelineimporttorchfromPILimportImage pipeline=QwenImageLayeredPipeline.from_pretrained("Qwen/Qwen-Image-Layered")pipeline=pipeline.to("cuda",torch.bfloat16)image=Image.open("assets/test_images/1.png").convert("RGBA")inputs={"image":image,"generator":torch.Generator(device='cuda').manual_seed(777),"true_cfg_scale":4.0,"negative_prompt":" ","num_inference_steps":50,"layers":4,"resolution":640,"cfg_normalize":True,"use_en_prompt":True,}withtorch.inference_mode():output=pipeline(**inputs)fori,layerinenumerate(output.images[0]):layer.save(f"layer_{i}.png")# 保存分解后的图层
  3. 可视化界面部署

    • 启动图像分解与 PPTX 导出界面:
      python src/app.py
    • 启动图层编辑界面(基于 Qwen-Image-Edit):
      python src/tool/edit_rgba_image.py

许可证

项目采用Apache License 2.0,允许自由使用、复制、修改和分发,但需保留原始版权信息和许可证说明。

更多细节可参考仓库的 Research Paper、Blog 或 Demo。


http://www.jsqmd.com/news/125283/

相关文章:

  • 小白必看!第一次装修选对公司少踩坑,4家省心装修品牌推荐 - 品牌测评鉴赏家
  • 手把手教你用Sunshine把旧电脑变成游戏串流神器
  • 终极指南:碧蓝航线自动脚本Excel数据导出完整教程
  • 告别旧房烦恼!靠谱二手房翻新公司大揭秘 - 品牌测评鉴赏家
  • 如何快速解决BlenderKit上传错误:专业调试指南
  • Switch大气层系统配置指南:新手零基础到精通全流程
  • P14480 化作彗星
  • 如何3步完成空洞骑士模组安装:Scarab管理器完整指南
  • DoubleQoL模组完全指南:如何快速提升你的工业帝国管理效率
  • 戴尔服务器风扇控制神器:告别机房噪音的智能解决方案
  • 3分钟掌握鸣潮工具箱:5个隐藏功能让你的游戏体验大升级
  • AUTOSAR架构图中服务层配置操作指南
  • 【计算机毕业设计案例】基于springboot的IT技术交流和分享平台基于springboot的社区技术交流平台的设计与实现(程序+文档+讲解+定制)
  • Audiveris终极指南:5步掌握免费乐谱数字化神器
  • Unity游戏翻译终极解决方案:XUnity.AutoTranslator完整指南
  • 通过开源鸿蒙终端应用Termony完成Talloc 命令行工具构建过程深度解读
  • 2026年,这些刷题APP助你技能飞升! - 品牌测评鉴赏家
  • Windows Defender移除全攻略:从困扰到彻底解决
  • [NOIP2022] 比赛
  • 游戏模组加载器Reloaded-II:新手也能玩转的高级定制方案
  • BlenderKit深度解析:高效3D资源管理插件的架构设计与技术实现
  • 2026执医技能通关攻略!这3家实操培训帮你精准踩分 - 品牌测评鉴赏家
  • Hidden Bar:Mac菜单栏终极清理指南,5分钟告别拥挤烦恼![特殊字符]
  • 执医考试培训机构怎么选?5大核心维度+高通过率机构测评 - 品牌测评鉴赏家
  • c++ 6
  • OBS VirtualCam 虚拟摄像头插件:一站式视频会议解决方案
  • 历年CSP-X复赛真题解析 | B4104 [CSP-X 2024 山东] 购物
  • 【计算机毕业设计案例】基于springboot的电动车租赁平台系统设计与实现(程序+文档+讲解+定制)
  • 终极指南:windows-defender-remover彻底解放Windows系统性能潜力
  • CF453E