本文介绍了KungfuBot,一种基于物理的人形机器人运动控制方法。该方法通过视频提取运动数据,筛选符合物理约束的动作,并利用自适应机制优化跟踪奖励,以实现机器人模仿人类动作的目标。研究者提出了双层优化框架,提升了机器人在复杂动态环境中的表现。
本研究探讨了神经网络参数重构训练数据的隐私问题,指出现有方法在特定条件下的有效性不足。通过双层优化问题的新公式,实验证明随机初始化的训练图像能够生成有效的重构样本,使攻击者无法判断图像是否真实存在于训练集中。这一发现对保护训练数据隐私具有重要意义。
本研究提出了一种新的贝叶斯方法,解决深度学习中的数据点选择问题,克服现有双层优化方法的计算和内存瓶颈,支持大规模语言模型的自动优化。
本文介绍了一种基于历史销售数据和机器学习的价格优化算法,能够最大化商品利润,实验结果显示总毛利润提高约8.2%。同时,提出了结合预测算法和优化技术的上下文随机双层优化框架,以解决不确定性决策问题,并开发了高效的双循环梯度方法,验证了其理论结果和计算复杂度。
本研究提出了一种名为AutoAL的主动学习策略,通过两个神经网络在可微分的双层优化框架下优化,解决了不同数据场景下主动学习算法效果差异大的问题。该方法能有效识别最优策略,提高模型准确性,并展示了整合现有主动学习方法的潜力。
本研究探讨了无固定点光滑性的单时间尺度多序列随机逼近(MSSA),提出了新的理论分析。结果表明,当操作符强单调时,收敛速度为$ ilde{ ext{O}}(K^{-1})$;若主操作符非单调,则为$ ext{O}(K^{-rac{1}{2}})$。该发现为双层优化和分布式学习提供了简化算法及性能保证。
该技术报告探讨了机器学习和计算机视觉中的优化问题,包括双层优化、近似梯度和可微分优化方法。提出了多种算法,如双层下降聚合和可微分Frank-Wolfe层,展示了在超参数优化和深度学习中的应用,显著提高了计算效率和准确性。
本文探讨了双层优化算法的新方法及其收敛性,提出了基于近似导数的算法、动量递归算法和随机双层优化算法,实验结果表明这些算法在超参数优化和元学习中表现优越,降低了计算复杂度,提高了效率。
本研究提出BiSSL,一种通过双层优化增强自监督学习的训练框架,改善预训练与微调阶段的对齐,提高下游任务的参数初始化。实验显示,BiSSL在多个图像分类数据集上提升了分类精度。
本研究提出了一种数据驱动的双层优化方法,解决分子性质预测中标签稀缺的问题。通过自动获取最佳迁移比率,实现多任务迁移学习,提升了40种分子性质的预测性能,并加快训练速度,克服了手动设计的局限性。
本文探讨无强凸性假设下的双层优化问题,提出了新的算法框架和稳定性条件,研究了随机二级优化方法,改进了复杂性界限,并提出了一阶算法以优化罚函数,达到ε-稳定解。此外,研究了零阶随机逼近算法及其样本复杂度,强调了新算法在非凸-强凸双层优化中的有效性和计算效率。
本文探讨了多种双层优化算法,如MORBiT、ADBO和SimFBO,旨在提高鲁棒性和通信效率。研究提出了上下文随机双层优化框架,解决了经典方法的收敛问题,并通过实验验证了其有效性。此外,研究还涉及分布式联邦学习和协作PAC学习,以提升模型的泛化性能和样本效率。
本文介绍了一种新的双层优化算法FdeHBO,该算法利用O(1)样本和一阶梯度信息,在非凸强凸随机双层优化中实现O(ε^(-1.5))的样本复杂度。研究了多种算法的收敛性,实验结果表明其在元学习和超参数优化中表现优异。此外,该算法在处理约束双层优化问题时,避免了计算Hessian逆矩阵,展现了良好的实际性能。
该研究提出了一种基于Moreau包络的双层优化算法MY-HPO,旨在解决超参数选择问题,并验证了其有效性。通过设计平滑的Lagrangian值函数,将问题转化为等价优化形式,显著改善了损失值。此外,研究还探讨了多目标双层优化问题,提出了一种高效的一阶多梯度方法FORUM,展示了其在多任务学习中的优越性能。
本文研究非凸强凸双层优化问题,提出了基于近似隐式导数和迭代导数的算法及新型算法stocBiO,并分析了其收敛性。实验结果表明,这些算法在元学习和超参数优化中表现良好。此外,探讨了非平滑函数导数的求解及其在随机逼近中的应用,提出了新的蒙特卡罗估计器,优化了梯度计算。
本文提出了双层优化编程(BiGrad)模型,将双层编程应用于神经网络,以降低计算复杂度并支持连续变量处理。研究分析了双层优化算法的收敛速度,提出了高效的算法设计,并展示了其在信号处理和机器学习中的应用潜力。新方法在解决双层背包问题时,速度比精确算法快约500倍,显示出广泛的应用前景。
本文研究了双层优化的一阶算法,通过罚函数方法建立了罚函数与超目标之间的强连接,并提出了一阶算法来优化罚函数,以找到一个 ε- 稳定解。在满足小误差近似条件的情况下,算法以 O (ε^{-3}) 和 O (ε^{-7}) 程度的复杂度达到 ε- 稳定点。
完成下面两步后,将自动完成登录并继续当前操作。