通过优化传统技术,我们改进了无监督PCA,使用轻量级语义日志表示解决未知日志事件问题。研究比较了七种日志异常检测方法,结果显示优化的PCA在有限数据和资源效率上与先进的深度学习方法效果相似,证明了传统技术的小改进带来的适应性和优势。
本文介绍了一种基于Venn-Abers预测器的系统日志异常检测方法。该方法通过收集和解析日志信息,生成事件计数矩阵,并利用TF-IDF对日志进行特征表示,最终通过二分类模型推理异常概率。实验中优化了运行效率,并评估了算法的有效性。
华为云社区分享了一种名为LightAD的日志异常检测评估框架,该框架能够自动化评估日志异常检测方法,研究结果表明轻量级机器学习方法优于深度学习方法。LightAD通过贝叶斯优化器实现模型训练时间、推断时间和性能得分的优化,帮助运维工程师选择合适的异常检测模型。
本文介绍了一种名为LightAD的日志异常检测评估框架,通过自动化超参数调优实现公正比较。作者评估了深度学习和轻量级机器学习方法在五个数据集上的性能,结果显示轻量级机器学习方法更高效准确。作者还提出了基于贝叶斯优化器的多目标优化公式,用于选择最佳异常检测算法。该研究成果已被ICSE 2024录用。
LogLG是一种弱监督日志异常检测框架,通过从无标注的日志中提取关键词构建日志事件图并训练检测模型,实现对未标记日志数据的异常检测。与现有方法相比,LogLG实现了显著的性能提升。
完成下面两步后,将自动完成登录并继续当前操作。