CONFLUX:一种结合强化学习后训练的潜在扩散模型用于3D胸部CT合成

发表
Max Van PuyveldeMax Van Puyvelde 提交
作者: Max Van PuyveldeMax Van Puyvelde, Halil Ibrahim Gulluk, Wim Van Criekinge, Olivier Gevaert

摘要

AI 生成总结
一个用于胸部CT生成的3D潜在扩散模型,通过自适应层归一化和强化学习后训练,实现了高保真合成,并能控制临床属性。
可控的3D医学图像生成模型可以合成具有指定临床属性的体数据,但这需要同时具有高保真度、原生3D且忠实于所请求条件的样本。我们提出了CONFLUX,一个用于胸部计算机断层扫描(CT)的潜在扩散模型:一个3D变分自编码器压缩每个体数据,一个修正流Transformer在潜在空间中进行生成。生成通过自适应层归一化以结构化的放射学元数据(18种异常发现、性别、年龄和重建核)为条件。该模型在三平面Frechet距离(FID 32.3 vs. MAISI的74.6)上优于强大的体积基线,同时暴露了对临床属性的直接控制。为了加强这种控制,我们添加了一个在线强化学习后训练阶段(群体相对策略优化),该阶段奖励分类器从每个生成体数据中恢复所请求发现的可靠性。经独立分类器判断,后训练将相对于真实扫描可靠性的不足减少了47%。我们发布了该模型和一个包含约20万个合成胸部CT数据集,其中包含涵盖各种临床发现的条件元数据。
查看 arXiv 页面查看 PDF

评论

Max Van PuyveldeMax Van Puyvelde
论文作者
论文提交者

CONFLUX是一种用于全容积3D胸部CT合成的条件修正流模型,通过GRPO强化学习后训练,精确控制所需的临床发现。

流匹配训练生成器匹配数据分布,但从不检查单个样本是否实现了其请求的属性;GRPO阶段直接优化这种一致性——据我们所知,这是首个3D医学流模型的GRPO后训练。

  • 从42维条件向量生成完整的216×176×200体积:包括18项CT-RATE异常发现、性别、年龄和重建核。
  • 在分布级别质量上优于强大的3D基线(MAISI, GenerateCT)。
  • GRPO后训练显著提高了请求发现的可靠性,经独立留出评估者验证——弥补了与真实扫描47%的差距。
  • 发布约200,000张带标签的合成胸部CT,用于队列增强和对照研究设计,其规模在真实语料库中是不可获得的。
  • 交互式演示,可根据任意临床概况生成体积。

📄 论文:https://arxiv.org/abs/2607.02998
🤗 模型:https://huggingface.co/gevaertlab/conflux
🤗 数据集 (20万):https://huggingface.co/datasets/gevaertlab/conflux-chest-ct
🩻 演示:https://huggingface.co/spaces/mxvp/conflux-chest-ct-demo

欢迎联系!

Lee SeungjuLee Seungju

你把标题拼错了

Max Van PuyveldeMax Van Puyvelde
论文作者
论文提交者

将在下一次arXiv发布中更新,谢谢!