QQWorld:用于世界模型正则化的分位数-分位数匹配
潜在世界模型通过在紧凑表示空间预测未来状态实现高效规划,但性能高度依赖潜在分布质量。现有方法 LeWorldModel 使用 Epps-Pulley(EP)目标将潜在变量正则化为各向同性高斯分布,但 EP 的校正梯度对孤立尾部样本迅速消失,导致重尾偏差控制不足。QQWorld 用分位数-分位数匹配目标替代 EP,直接对齐投影分布的分位数。
查看原文解读生成中或暂时不可用,请稍后刷新重试,或直接查看原文。
潜在世界模型通过在紧凑表示空间预测未来状态实现高效规划,但性能高度依赖潜在分布质量。现有方法 LeWorldModel 使用 Epps-Pulley(EP)目标将潜在变量正则化为各向同性高斯分布,但 EP 的校正梯度对孤立尾部样本迅速消失,导致重尾偏差控制不足。QQWorld 用分位数-分位数匹配目标替代 EP,直接对齐投影分布的分位数。
查看原文