Aug 23, 2026 5 min read
09. Order Matters: Sequence to Sequence for Sets:无序对象为什么仍有“顺序问题”
论文同时处理两个不同问题:输入是集合时,表示必须对排列不变;输出是集合时,同一答案有许多等价序列,训练必须选择或边缘化输出顺序。标题“顺序很重要”指优化会受线性化方式影响,即使任务语义不关心顺序。
大模型算法、训练系统与工程实践的学习笔记。
Tag
1 essay under this label.
论文同时处理两个不同问题:输入是集合时,表示必须对排列不变;输出是集合时,同一答案有许多等价序列,训练必须选择或边缘化输出顺序。标题“顺序很重要”指优化会受线性化方式影响,即使任务语义不关心顺序。