提出可靠性加权信用分配方法
热点事件观察中
提出可靠性加权信用分配方法
1 篇报道1 个报道来源1 天前更新
先了解这件事
报道摘要
Junhao Zhao等提出Internal-DW,在保留完整前向滚动和所有步骤损失的同时,对内部梯度路径进行可靠性加权,以降低远距离梯度对不可预测变化的放大。论文摘要称,在四个历史占主导、弱驱动测试床上,该方法相较完整BPTT将预测误差降低5.2%至13.8%,并在三个测试床上优于梯度裁剪和Jacobian正则化;但在可用历史有限或采样器无法表示主要驱动相关变化时,收益会减弱甚至反转。
摘自 arXiv · cs.AI
最新进展10月8日 12:00
Junhao Zhao等提出Internal-DW加权长程自回归预测中的远距离梯度报道时间线
沿着报道,了解事件的不同侧面。
10月8日
- arXiv · cs.AIJunhao Zhao等提出Internal-DW加权长程自回归预测中的远距离梯度
Junhao Zhao等提出Internal-DW,在保留完整前向滚动和所有步骤损失的同时,对内部梯度路径进行可靠性加权,以降低远距离梯度对不可预测变化的放大。论文摘要称,在四个历史占主导、弱驱动测试床上,该方法相较完整BPTT将预测误差降低5.2%至13.8%,并在三个测试床上优于梯度裁剪和Jacobian正则化;但在可用历史有限或采样器无法表示主要驱动相关变化时,收益会减弱甚至反转。
本事件热度走势
还没有足够的连续观测数据,暂不绘制趋势。