跳到正文
热点事件持续更新

提出GraphDPO:将DPO扩展为图结构偏好优化

1 篇报道1 个报道来源4 小时前更新

先了解这件事

AI 综述

Ning Liu、Chuanneng Sun、Kristina Klinkner、Shervin Malmasi等在arXiv(cs.AI)发布论文,提出GraphDPO,将直接偏好优化(DPO)从独立成对比较推广为在多轮rollout排序诱导的有向无环偏好图上的结构化优化:支配关系编码为边,采用受Plackett–Luce启发的目标函数聚合被支配邻域的监督。 方法可传递偏好传递关系,并通过等价类处理并列与不可比较的响应;在该分层构造下,借助高效的log-sum-exp聚合保持每个prompt线性复杂度。 据论文摘要报告,在推理和程序合成任务上的实验显示优于对比方法;具体数值与基线细节未在摘要中给出。

AI 根据报道生成 · 3 小时前更新

报道时间线

沿着报道,了解事件的不同侧面。

10月12日
  1. arXiv · cs.AI
    GraphDPO将语言模型成对偏好优化扩展为偏好图优化

    Ning Liu等人提出GraphDPO,将直接偏好优化从独立成对比较扩展到由多轮rollout排序形成的有向无环偏好图,并设计受Plackett--Luce启发的目标函数聚合被支配邻域监督。方法可传递偏好传递关系,通过等价类处理并列和不可比较响应,同时保持每个prompt的线性复杂度;在推理和程序合成任务上的实验由摘要报告为优于对比方法。

本事件热度走势

可比范围当前
9
可比范围峰值
910月12日 14:00
近 24 小时变化
–

趋势仅比较持续完整观测到的相同主体,范围可能小于当前热度统计。移动指针或点击图表查看每小时热度;键盘可用左右方向键切换。