研究发现,高秩的初始权重会导致懒惰的学习,而低秩的初始权重则倾向于更丰富的学习。然而,与任务和数据统计信息一致的低秩初始权重仍可能导致懒散学习。初始权重结构在塑性代谢成本和灾难性遗忘风险方面起关键作用。
完成下面两步后,将自动完成登录并继续当前操作。