当前位置: 首页 > news >正文

CVPR 2026 | 从图像直接生成海报!港科大美团开源PosterOmni:一键解锁艺术海报创作新境界

PosterOmni作为首个统一局部编辑与全局创作的艺术海报生成框架,通过高效的数据蒸馏与奖励反馈机制,解锁了基础编辑模型在多任务图像转海报生成中的潜力。

在图像转海报的创意领域,如何高效融合局部精细编辑与全局概念设计,一直是创作者面临的挑战。PosterOmni这一创新框架的出现,正引领我们进入一个全新的艺术海报创作时代!通过任务蒸馏与统一奖励反馈机制,PosterOmni实现了从图像到海报的高效转换,无论是局部调整还是全局布局,都能轻松驾驭,让创意触手可及。

什么是 PosterOmni?

PosterOmni 是一个统一的图像转海报框架,涵盖以下两个方面:

  • 海报本地编辑:缩放、填充、扩展、身份驱动
  • 海报全局创作:布局驱动,风格驱动
  • 统一框架:一个界面即可处理多任务海报生成和编辑。

相关链接:
  • 论文:https://arxiv.org/abs/2602.12127
  • 主页:https://ephemeral182.github.io/PosterOmni/
  • 源码:https://github.com/MeiGen-AI/PosterOmni
  • 模型:https://huggingface.co/MeiGen-AI/PosterOmni_v1
  • 数据:https://huggingface.co/datasets/PosterOmni
  • 试用:https://huggingface.co/spaces/PosterOmni
论文介绍

图像转海报的生成任务,要求模型不仅具备局部调整的能力,还需深入理解高级设计概念。传统方法往往难以在保留语义完整性的同时,兼顾美学设计的和谐统一。PosterOmni 的提出正是为了解决这一多维度创作难题,通过整合局部编辑与全局创作,实现艺术海报的高效生成。

方法概述

PosterOmni 采用四阶段工作流程进行训练(见下图),逐步统一本地编辑和全局创建功能。

  • 第一阶段:特定任务的SFT 通过针对特定任务的指导,培训编辑专家(调整大小/填充/扩展/标识)和创作专家(布局/样式),为每项海报任务建立强大的专业能力。
  • 第二阶段:任务提炼 将任务专家的知识提炼成一个单一的多任务模型,从而在本地和全局任务中实现一致的行为。
  • 第三阶段:PosterOmni奖励培训 学习统一的奖励信号来评估跨任务的海报结果,强调文本保真度、视觉一致性和整体海报质量。
  • 第四阶段:全方位编辑强化学习 通过强化学习进一步将统一模型与奖励信号对齐,从而提高在各种海报编辑和创建场景中的鲁棒性和质量。
PosterOmni 数据集

论文推出了一套统一的数据集,包括PosterOmni-200K(训练集)和PosterOmni-Bench(评估集),用于图像到海报的生成。PosterOmni -200K包含超过 20 万个配对样本,涵盖六项任务——局部编辑(缩放、填充、扩展、身份驱动)和全局创建(布局驱动、风格驱动)——并包含六大海报主题:产品、食品、活动/旅游、自然、教育和娱乐。PosterOmni -Bench提供540 个中文提示和480 个英文提示,均匀分布在相同的六大主题中,以确保跨任务评估的一致性。

实验结果

  • 局部编辑精度:PosterOmni在保持原始主题的同时,实现了精确的局部调整,包括扩展、填充、缩放和ID驱动生成。
  • 全局创作逻辑:模型能够处理抽象的高层次任务,如布局驱动和风格驱动生成,确保整个海报的美学连贯性。
  • 统一框架优势:无缝集成多种编辑与生成能力,无需切换管道,显著提升了创作效率与灵活性。

  • 基准测试领先:在PosterOmni-Bench基准测试中,PosterOmni在参考遵循度、全局构图质量和美学和谐性方面,均超越了现有开源基线,甚至超越了部分专有系统。
结论

PosterOmni作为首个统一局部编辑与全局创作的艺术海报生成框架,通过高效的数据蒸馏与奖励反馈机制,解锁了基础编辑模型在多任务图像转海报生成中的潜力。其不仅显著提升了生成结果的质量与美学吸引力,更为未来的创意设计工具开发提供了宝贵方向。随着技术的不断演进,PosterOmni有望在游戏设计、广告创意、文化传播等领域发挥巨大作用,让艺术海报创作更加便捷、高效、富有创意。

http://www.jsqmd.com/news/435330/

相关文章:

  • 共话房山区口碑好的LED显示屏企业,金元彩亮科技服务咋样 - 工业设备
  • 如何修改word文档创建时间?简单的修改方法
  • vp 2024夏季PAT甲级
  • 2026年知名的仿石砖 品牌推荐:通体仿石砖/仿石石英砖/仿石材路面砖品牌厂商推荐(更新) - 行业平台推荐
  • 镍钛合金丝哪家强?深度测评5家头部供应商,揭秘高端制造核心材料选型逻辑 - 深度智识库
  • 7.1 强化学习(Reinforcement learning,RL)概述
  • XGBoost GPU加速超快
  • 2026年比较好的蓄热石墨烯纺织品 品牌推荐:超轻石墨烯纺织品/烫金烫银石墨烯纺织品厂家专业度参考(精选) - 行业平台推荐
  • 如何修改图片的创建时间和修改时间日期
  • 濮阳AI搜索优化公司性价比怎么样,费用多少钱 - mypinpai
  • 钽丝怎么选?一文读懂纯度/精度/合规性要求及5家靠谱供应商 - 深度智识库
  • 苏州飞贺纺织靠谱吗,贸易商选购它的产品费用高不高? - mypinpai
  • 斜板填料选购终极指南:从材质到工艺,如何甄别真正的品质厂家? - 品牌推荐大师
  • 如何为爱宠选择?徐汇宠物耳道内窥镜检查机构一览,狗狗耳道内窥镜检查/猫咪体检/狗狗隐睾绝育,宠物耳道内窥镜检查专家哪家好 - 品牌推荐师
  • 如何更改文档时间格式?文档时间格式更改步骤
  • 2026年口碑好的西安保护装置 厂家推荐:防逆流保护装置/防孤岛保护装置用户口碑认可厂家 - 行业平台推荐
  • 螺杆泵系统品牌推荐杭州兴龙泵业核心优势解析:三螺杆泵/双螺杆泵/单螺杆泵/螺杆泵系统/切碎机/选择指南 - 优质品牌商家
  • 蓝桥/15/B.1/好数
  • 新乡家装公司哪家口碑好,派轩装饰靠谱排名如何 - 工业品网
  • 东北靠谱的游乐坦克服务厂商有哪些,价格贵吗? - 工业品网
  • 2026年靠谱的单法兰压力变送器 品牌推荐:双法兰压力变送器/设备级压力变送器靠谱厂家盘点 - 行业平台推荐
  • 格式总出错?AI论文平台 千笔写作工具 VS 万方智搜AI,继续教育写作者首选!
  • 说说单工位真空清洗机优质生产商,宁波博尔创新靠谱不? - 工业品牌热点
  • 瑞祥商联卡回收选京回收还是猎卡回收? - 京回收小程序
  • 2026年优质牛肉源头厂家盘点,品质之选不容错过,鲜牛肉/牛肉/天祝白牦牛肉/白牦牛肉/白牦牛/新鲜牛肉,牛肉厂家怎么选 - 品牌推荐师
  • 2026年镍钛合金丝厂家Top5推荐:医疗、航空航天与工业自动化场景适配指南 - 深度智识库
  • 2026年评价高的流延膜清机料 品牌推荐:昆山螺杆清机料/昆山高温螺杆清机料高评分品牌推荐(畅销) - 行业平台推荐
  • 破解弓网监测难题:动车组受电弓视频监控系统助力机务高效巡检
  • 2026年评价高的服装展柜 品牌推荐:眼镜展柜/连锁店展柜厂家真实测评 - 行业平台推荐
  • 国内镍钛合金丝/钽丝/钨棒/钽箔/镍箔生产厂家哪家强?2026年最新实力推荐 - 深度智识库