小红花·文摘
  • 首页
  • 广场
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI
参数到底是什么?!

机器学习模型的参数决定其行为和性能,影响预测结果。训练数据质量直接影响参数学习,参数过多或过少可能导致过拟合或欠拟合。理解参数对掌握机器学习至关重要。

参数到底是什么?!

KDnuggets
KDnuggets · 2026-02-02T15:00:39Z
决策树为何会失败(以及如何修复它们)

决策树在实际应用中可能面临过拟合、欠拟合和特征冗余等问题。过拟合使模型过于复杂,导致新数据预测不佳;欠拟合则因模型过于简单,无法有效学习。为优化决策树模型,可以采用正则化、调整模型复杂度和特征选择等方法。

决策树为何会失败(以及如何修复它们)

MachineLearningMastery.com
MachineLearningMastery.com · 2025-11-19T11:00:12Z
如何诊断回归模型失败的原因

本文探讨了回归模型失败的常见原因及其诊断方法,包括欠拟合、过拟合、数据泄漏、噪声特征、数据预处理不当、超参数设置错误和数据量不足。通过XGBoost模型实例,展示了识别和解决这些问题的方法,以提高预测准确性。

如何诊断回归模型失败的原因

MachineLearningMastery.com
MachineLearningMastery.com · 2025-07-31T16:27:21Z
人工智能模型 – 偏差、方差、欠拟合、过拟合

偏差是由于错误假设引起的误差,高偏差模型过于简单,导致欠拟合;方差是对训练数据过于敏感的误差,高方差模型过于复杂,导致过拟合。可通过增加模型复杂性、特征工程和延长训练时间来减少偏差;通过简化模型、增加训练数据和使用正则化技术来减少方差。

人工智能模型 – 偏差、方差、欠拟合、过拟合

DEV Community
DEV Community · 2025-04-25T21:20:38Z

本研究提出了一种过拟合-欠拟合指标(OUI),用于监测深度神经网络的训练过程,并识别最佳的正则化超参数。实验结果表明,OUI能够有效指导权重衰减超参数的选择,从而提升模型的泛化能力。

我们需要谈谈权重衰减:过拟合检测的新视角

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2025-04-24T00:00:00Z

本研究提出SALT方法,解决医学图像分割中的欠拟合问题。通过选择性适应重要奇异值,SALT在五个医学数据集上提高了2%至5%的Dice指标,展现出良好的适应性。

SALT: Singular Value Adaptation for Low-Rank Transformations

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2025-03-20T00:00:00Z
偏差-方差权衡

在机器学习中,偏差-方差权衡对构建稳健模型至关重要。偏差源于模型对数据的错误假设,可能导致欠拟合;方差则反映模型在不同数据子集上的预测变化,可能导致过拟合。理想模型应在偏差和方差之间取得平衡,以优化预测准确性。

偏差-方差权衡

DEV Community
DEV Community · 2025-03-14T16:30:00Z
消失梯度与爆炸梯度问题及Dying ReLU问题

文章讨论了深度学习中的过拟合与欠拟合问题,以及在PyTorch中使用的激活函数、损失函数和优化器。重点分析了消失梯度和爆炸梯度的成因、检测方法及缓解措施,特别是Batch Normalization和Gradient Clipping的应用,同时提到Dying ReLU问题及其解决方案。

消失梯度与爆炸梯度问题及Dying ReLU问题

DEV Community
DEV Community · 2024-11-17T23:00:33Z
过拟合与欠拟合

文章讨论了过拟合和欠拟合及其解决方法。过拟合是指模型在训练数据上表现良好,但在新数据上效果差,原因包括训练数据不足、数据不平衡和噪声。解决方法包括增加训练数据、减少噪声和使用正则化。欠拟合则是模型在训练和新数据上均表现不佳,可能由于模型过于简单或训练时间不足。两者之间存在权衡,需要平衡偏差与方差。

过拟合与欠拟合

DEV Community
DEV Community · 2024-11-17T22:41:06Z

该研究探讨了变分自编码器(VAE)中的隐藏表示,提出了内在维度和信息不平衡的新理解。研究发现,当瓶颈大小超过内在维度时,VAE的行为会发生变化,并确认了快速拟合与缓慢泛化的训练阶段。这为优化架构搜索和诊断欠拟合问题提供了新工具。

理解变分自编码器的内在维度与信息不平衡

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-11-04T00:00:00Z

本文提出了一种新颖的基于距离的回归方法,旨在解决过拟合和欠拟合问题。研究表明,该方法显著提高了预测准确性,并在特定数据集上展现了实用价值。

Adjusting Overfitting in Regression

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-10-24T00:00:00Z

文章讨论了通过调整配置优化神经网络性能,重点在于避免过拟合和欠拟合。过拟合会导致模型在新数据上表现不佳,欠拟合则无法识别数据模式。早停法可以在验证损失最小时停止训练。损失函数如MSE和MAE影响模型对异常值的敏感度。优化器如SGD和Adam通过调整学习率提高训练效率。文章还提供了一个PyTorch示例。

优化你的神经网络

DEV Community
DEV Community · 2024-10-12T16:37:38Z

过拟合是指模型在训练数据上表现好但在新数据上表现差,通常因为模型太复杂或数据不足。解决方法包括正则化和简化模型。欠拟合是模型在所有数据上表现差,通常因为模型太简单或训练不足。可以通过增加复杂度和特征工程来改善。关键是平衡模型复杂度与泛化能力。

过拟合与欠拟合 - 蝈蝈俊

蝈蝈俊
蝈蝈俊 · 2024-09-29T08:00:00Z
在 PyTorch 中的过拟合与欠拟合

过拟合是模型在训练数据上表现好但在新数据上表现差的问题,原因包括数据量小、不平衡、噪声多、训练时间长或模型复杂。解决方法有增加数据、多样化、减少噪声、提前停止、使用Dropout、集成学习和正则化。欠拟合是模型对所有数据表现差,原因是模型简单、训练时间短或正则化过多。解决方法包括增加模型复杂性、延长训练时间和减少正则化。

在 PyTorch 中的过拟合与欠拟合

DEV Community
DEV Community · 2024-09-26T16:21:46Z

本研究提出了重新审视提示预训练(RPP)框架,解决了视觉语言模型提示预训练中的欠拟合和泛化能力不足问题。实验证明RPP在多个基准测试中表现出色。

重新审视视觉语言模型的提示预训练

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-09-10T00:00:00Z

机器学习中的偏差-方差权衡是关键概念。偏差指模型过于简单导致系统性错误,方差则是模型对数据波动过于敏感导致复杂性过高。有效的模型需在偏差和方差之间找到平衡,以提高准确性。过拟合和欠拟合是常见问题,前者模型复杂,后者模型简单。增加训练数据或调整模型复杂度可帮助解决这些问题。

机器学习中的偏差-方差权衡:概念与教程

BMC Software | Blogs
BMC Software | Blogs · 2024-08-22T00:00:53Z

本文介绍了一种新颖的损失设计——“Lai损失”,通过整合正则化项到传统损失函数中,有效控制模型平滑度,减少过拟合和欠拟合。同时,提出了一种随机抽样的方法,解决了在大样本条件下应用该方法的挑战。实验结果证明Lai损失设计可以在确保最大准确性的同时控制模型平滑度。

Lai Loss:一种融合正则化的新型损失函数

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-05-13T00:00:00Z

本论文重新审视了在线学习中的记忆排挤动态,并通过设计了一个简单直观的“重复增强排挤(RAR)”基线来解决欠拟合和过拟合问题。研究了重复和增强练习之间的相互作用,并应用强化学习(RL)来动态调整 RAR 的超参数,以平衡稳定性和可塑性。

OVOR:无需训练的逐步增加类别学习中的 OnePrompt 与虚拟异常规则

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2024-02-06T00:00:00Z

本文提出了一种新的学习策略,用于解决神经网络在处理类不平衡数据时的欠拟合和过拟合问题。该策略通过混合主类数据和其他数据的特征,在小批量中削弱主类数据的特征,以实现类之间的训练过程平衡。该策略在难度较大的数据集中取得了最新成果。

类别不平衡下神经网络训练简化

BriefGPT - AI 论文速递
BriefGPT - AI 论文速递 · 2023-12-05T00:00:00Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码