发生了什么
OmniNFT 发布 RL fine-tuning framework
为什么值得关注
通过模态内奖励路由等创新技术显著提升音视频同步精度。
信息来源
以下内容来自公开来源,可打开原文继续核验。
01
多模态 NFT 框架
OmniNFT 是一个基于强化学习的 NFT 框架,使用 LTX-2/2.3 并提供预训练 LoRA 权重,实现音视频同步生成。该框架通过三种设计解决多模态奖励合并导致的梯度冲突:模态内奖励路由、层级梯度手术和区域损失重新加权。
打开原始来源 ↗