本研究提出了一种基于图的全局优化框架,解决带有非凸正则化函数的统计模型参数估计问题。该方法通过构建强凸松弛,确保收敛到全局最优,并在稀疏线性回归中展示了有效性。
本研究提出了一种高效的高斯过程汤普森采样优化策略,旨在解决高斯过程在连续优化中的全局优化问题。通过一维全局根查找识别局部最优点,显著提升了贝叶斯优化的性能。
本文探讨了神经网络中的神经崩溃现象,分析了交叉熵损失函数在特征模型中的全局优化景观。研究表明,神经崩溃普遍存在于深度学习中,影响优化和泛化能力。提出无约束层剥模型,证明其在全局最小化时表现出神经崩溃现象,并探讨了批归一化和权重衰减的影响。
本文介绍了多种光流估计方法,包括基于全局优化的光流估计、神经网络优化、无监督学习的DDFlow和快速光流预测的FastFlowNet。这些方法在准确性、效率和实时性方面有显著提升,适用于复杂环境中的自主导航和视觉任务。
本文介绍了一种适应性算法CUQB,旨在高效解决昂贵黑盒函数的全局优化问题,表现优于传统贝叶斯优化。同时,提出了改进的准牛顿方法和SBQR技术,增强了优化算法的收敛性和鲁棒性,适用于多种优化场景。
本文提出了一种协作和可解释的贝叶斯优化框架(CoExBO),通过整合人类洞察力,提供符合用户偏好的算法建议,并建立信任。CoExBO在锂离子电池设计中验证了其有效性,相较于传统方法显著改进。此外,研究探讨了因果模型中的全局优化问题,提出了结合因果推断和决策的新算法,显示出优越性。
该文综述自注意力机制与SVM的等价性研究,探讨其对训练方向和全局优化的影响。多项工作从凸对偶、梯度下降及核方法视角分析Transformer归纳偏差,证明单层Transformer可逼近最小二乘回归、最大边缘解及稀疏函数,并给出收敛与泛化保证。
本文介绍协作式隐式神经SLAM系统,包含里程计、回环检测、子图融合与全局优化,提出基于神经元的三维场景表示和分布式至集中式学习策略,以提升一致性与精度。同时涉及Active Neural SLAM、iSLAM等神经SLAM方法,在探索、导航与地图生成上优于传统方法。
本文综述非凸正则化优化的理论与算法进展,主要内容包括:基于l_p正则的无约束极小化方法及IRL1/IRL2闭式求解与收敛分析;非凸风险最小化的样本复杂度与泛化性;正则化M估计局部最优解的误差上界及近似全局最优算法;基于信赖域法的全局极小化;正则化路径追踪与避免鞍点的提纯方法、无鞍牛顿法及加权l^p线性反问题的迭代算法。
本研究提出了一种扩展解决方案,使用基于超平面的决策树建模非线性约束,并利用其他可转化为MIO的机器学习模型逼近原问题,采用自适应采样方法获得更准确的约束近似,利用鲁棒优化考虑样本依赖性训练的不确定性,并使用松弛方法处理MIO近似的不可行性。在81个全局优化实例中测试了增强的框架,并与BARON进行了比较,在11个实例中显示了更好的最优间隙或解决时间。
该研究证明了深度神经网络在多标签分类任务中存在神经折叠现象,并发现了多标签学习中的“标签平均”组合属性,建立了全局优化结果和训练效率的实证证据。
该文介绍了一种解决符号回归问题的方法,采用参数化函数族和全局优化的方式,将离散问题转化为连续优化问题。作者证明了该方法在常见符号回归基准测试中取得了最先进的结果。
本文介绍了梯度下降法在机器学习和优化算法中的应用,包括其数学原理和步骤,以及应用实例。梯度下降法具有全局优化能力、广泛适用性和可扩展性等优点,但也存在不足之处。
完成下面两步后,将自动完成登录并继续当前操作。