数据源与状态仍在导航菜单中
arxiv.org·2026/10/19
MOSS-Image针对开放权重模型在密集双语长文本与复杂布局上的不足,从零预训练一个5B单流扩散Transformer,基于ReLAION等去重和剔除AI图像后的图文数据,配合多粒度、结构感知监督与渐进分辨率训练,并把自然语言描述和布局JSON统一到同一文本条件接口;推理端由大语言模型驱动的意图感知提示增强模块通过任务路由、知识检索和可执行布局规划,将短请求转成内容与空间规格。评测上,LLTB覆盖中英长篇文本渲染,模型取得96.3 Mean-6,领先其他开放权重模型;RLA对61项海报、信息图和界面任务盲评,端到端Elo为1698.70,仅次于GPT Image、高于Seedream;在共享增强提示下,骨干以1807.34 Elo居首。局限是暂不支持参考图条件与图像编辑,提示增强器依赖外部语言模型。
为什么重要 信息密集图如信息图、UI、知识卡,有了开源可控方案;它把布局规划与像素渲染解耦,可直接接入自家 agent 管线适合 做多模态生成、版式可控出图与 agent 工具链的工程与研究读者
近期的闭源图像生成系统能够生成从简单构图到信息密集图形的多样化视觉内容,但开放权重的文本到图像模型在处理密集文本和复杂布局方面仍然存在困难。为了缩小这一差距,我们提出了 MOSS-Image,这是一个将高保真视觉合成与意图感知构图相结合的开放生成系统。
首先,我们采用精心设计的配方从零开始预训练了一个 5B 单流扩散 transformer (DiT),实现了双语长文本渲染和精确的布局控制。其次,我们开发了一个意图感知的智能体提示增强 (PE) 模块,将多样化的用户请求转换为详细的内容和布局规范。两者结合,使 MOSS-Image 能够生成文本丰富且布局连贯的图像。
我们还进一步提出了 LongLongTextBench (LLTB) 用于评估长篇英文和中文文本渲染,以及 RealLayoutArena (RLA) 用于端到端的富布局生成。MOSS-Image 在 LLTB 上在开放权重模型中取得了最先进的性能,平均文本覆盖率达到 96.3%。
在 RLA 上,MOSS-Image 在端到端系统比较中排名第二,而其骨干模型在使用共享增强提示评估的生成器中排名第一。我们将发布模型、训练配方和评估框架,以支持进一步的研究并推动文本到图像社区的发展。
Recent closed-source image generation systems can produce diverse visual content from simple compositions to information-dense graphics, yet open-weight text-to-image models still struggle with dense text and intricate layouts.
To narrow this gap, we introduce MOSS-Image, an open generation system that combines high-fidelity visual synthesis with intent-aware composition.
First, we pretrain a 5B single-stream diffusion transformer (DiT) from scratch with a carefully designed recipe, enabling bilingual long-form text rendering and precise layout control.
Second, we develop an intention-aware agentic prompt enhancement (PE) module that translates diverse user requests into detailed content and layout specifications.
Together, they enable MOSS-Image to generate text-rich and layout-coherent images.
We further introduce LongLongTextBench (LLTB) for evaluating long-form English and Chinese text rendering, and RealLayoutArena (RLA) for end-to-end layout-rich generation.
MOSS-Image achieves state-of-the-art performance among open-weight models on LLTB, with an average text coverage of 96.3%.
On RLA, MOSS-Image ranks second in the end-to-end system comparison, while its backbone ranks first among generators evaluated with shared enhanced prompts.
We will release the model, training recipe, and evaluation framework to support further research and promote the text-to-image community.
EVIDENCE / METHODS
要点
开源权重 T2I 模型如 FLUX、Qwen-Image、Z-Image 仍难处理密集文本与复杂版式,整体外观合理不代表文字可读、内容完整。
原版排版与图表 · 手机无法内嵌时可在浏览器打开。PDF 插件内选文不能传给网页助手。