PosterCraft – 港科大联合美团等推出的美学海报生成框架

PosterCraft – 港科大联合美团等推出的美学海报生成框架

4.8
0热度
HuggingFace

PosterCraft是什么PosterCraft是香港科技大学(广州)和美团等机构推出的用在生成高质量美学海报的统一框架。框架摒弃模块化设计流程和固定的预定义布局,支持模型自由探索连贯且视觉上引人入胜的构图。框架基于四个关键阶段的级联工作流优化高美学海报的生成,可扩展的文本渲染优化、高质量海报微调、基于美学文本的强化学习以,及视觉-语言反馈精炼。每个阶段用专门的自动化数据构建管道支持,满足特

PosterCraft是什么

PosterCraft是香港科技大学(广州)和美团等机构推出的用在生成高质量美学海报的统一框架。框架摒弃模块化设计流程和固定的预定义布局,支持模型自由探索连贯且视觉上引人入胜的构图。框架基于四个关键阶段的级联工作流优化高美学海报的生成,可扩展的文本渲染优化、高质量海报微调、基于美学文本的强化学习以,及视觉-语言反馈精炼。每个阶段用专门的自动化数据构建管道支持,满足特定需求,实现无需复杂架构修改的稳健训练。在多项实验中,PosterCraft在渲染准确性、布局连贯性和整体视觉吸引力方面显著优于开源基线,接近商业系统的质量。

PosterCraft

PosterCraft的主要功能

  • 高质量文本渲染:能准确地渲染文本,确保文本内容的清晰度和准确性。
  • 艺术内容创作:生成具有抽象艺术感的视觉内容,让海报具有独特的美学风格。
  • 引人注目的布局设计:创建具有视觉冲击力的布局,确保整体设计的协调性和一致性。
  • 端到端生成:从文本输入到最终海报的生成,整个过程在单一模型中完成,无需外部模块或预设模板。
  • 美学优化:基于强化学习和视觉-语言反馈机制,优化海报的美学质量和内容准确性。

PosterCraft的技术原理

  • 可扩展的文本渲染优化:基于大规模的Text-Render-2M数据集,对模型进行文本渲染的优化训练,提高文本的准确性和清晰度。
  • 高质量海报微调:基于HQ-Poster-100K数据集进行监督微调,提升海报的整体视觉质量和艺术风格的一致性。
  • 基于美学文本的强化学习:用Poster-Preference-100K数据集,基于最佳偏好优化,训练模型生成更符合人类审美的海报。
  • 视觉-语言反馈精炼:借助Poster-Reflect-120K数据集,结合多模态反馈,对生成的海报进行进一步的优化和调整,提高内容的准确性和美学价值。

PosterCraft的项目地址

  • 项目官网:https://ephemeral182.github.io/PosterCraft/
  • GitHub仓库:https://github.com/Ephemeral182/PosterCraft
  • HuggingFace模型库:https://huggingface.co/PosterCraft
  • arXiv技术论文:https://arxiv.org/pdf/2506.10741

PosterCraft的应用场景

  • 电影海报:根据电影主题生成吸引人的海报,突出关键元素和视觉冲击力。
  • 艺术展览海报:生成具有艺术感和文化氛围的海报,展现展览理念和风格特点。
  • 产品推广海报:根据产品特点生成吸引人的推广海报,展示功能和优势。
  • 学术会议海报:生成专业和学术氛围的海报,展示会议主题和议程。
  • 校园活动海报:制作富有创意的海报,展现活动内容和亮点。

首页 发现
看过 我的