跳到正文
热点事件观察中

提出可靠性加权信用分配方法

1 篇报道1 个报道来源1 天前更新

先了解这件事

报道摘要

Junhao Zhao等提出Internal-DW,在保留完整前向滚动和所有步骤损失的同时,对内部梯度路径进行可靠性加权,以降低远距离梯度对不可预测变化的放大。论文摘要称,在四个历史占主导、弱驱动测试床上,该方法相较完整BPTT将预测误差降低5.2%至13.8%,并在三个测试床上优于梯度裁剪和Jacobian正则化;但在可用历史有限或采样器无法表示主要驱动相关变化时,收益会减弱甚至反转。

摘自 arXiv · cs.AI

报道时间线

沿着报道,了解事件的不同侧面。

10月8日
  1. arXiv · cs.AI
    Junhao Zhao等提出Internal-DW加权长程自回归预测中的远距离梯度

    Junhao Zhao等提出Internal-DW,在保留完整前向滚动和所有步骤损失的同时,对内部梯度路径进行可靠性加权,以降低远距离梯度对不可预测变化的放大。论文摘要称,在四个历史占主导、弱驱动测试床上,该方法相较完整BPTT将预测误差降低5.2%至13.8%,并在三个测试床上优于梯度裁剪和Jacobian正则化;但在可用历史有限或采样器无法表示主要驱动相关变化时,收益会减弱甚至反转。

本事件热度走势

还没有足够的连续观测数据,暂不绘制趋势。