小红花·文摘
  • 首页
  • 广场
  • 排行榜🏆
  • 直播
  • FAQ
Dify.AI

本文介绍了京东内网环境中基于K8s的日志收集方案,采用ilogtail、JMQ和JES替代kafka和es,通过配置调整实现高可用性,提升日志处理效率。

纳尼?自建K8s集群日志收集还能通过JMQ保存到JES

京东科技开发者
京东科技开发者 · 2025-11-03T07:20:26Z
从Fluentd到Fluent Bit:迁移指南

Fluentd已存在14年,广泛用于企业日志收集。Fluent Bit作为其子项目,性能更高,支持日志、指标和追踪,已被多家大公司采用。迁移到Fluent Bit可提升性能、简化配置,并支持OpenTelemetry。两者在架构、性能和自定义处理上有显著差异,Fluent Bit更符合现代需求。

从Fluentd到Fluent Bit:迁移指南

Cloud Native Computing Foundation
Cloud Native Computing Foundation · 2025-10-01T15:13:55Z
万字长文:企业可观察性平台的建设方案实践

在家庭服务器上部署可观察性组件,使用Docker环境,结合Filebeat、Kafka和Logstash进行日志收集,ElasticSearch和Kibana用于存储和可视化。链路追踪采用OpenTelemetry和Jaeger,监控通过Prometheus和Grafana实现,旨在提供低成本、高效能的解决方案。

万字长文:企业可观察性平台的建设方案实践

dotNET跨平台
dotNET跨平台 · 2025-09-29T06:01:49Z
如何以Kubernetes原生方式部署Fluent Bit

Fluent Bit是一个开源数据收集代理,Fluent Operator简化了在Kubernetes中部署和管理Fluent Bit的过程。通过自定义资源定义(CRDs),用户可以轻松配置日志收集管道,实现动态配置更新,无需重启Pod,从而提升可观察性和操作效率。

如何以Kubernetes原生方式部署Fluent Bit

The New Stack
The New Stack · 2025-07-25T20:00:38Z
浏览器从 A 到 Z

本文讨论了作者使用的工具和平台,包括日志收集工具Axiom、AI工具ChatGPT、RSS客户端inoreader等,强调了信息收集与管理的重要性,以及在技术前沿的追随和Discord平台的使用。

浏览器从 A 到 Z

Bryan's Blog
Bryan's Blog · 2025-03-21T07:57:00Z
Kubernetes上的多容器侧车模式及实操示例

Kubernetes的侧车容器模式允许辅助容器与主容器在同一Pod中运行,提供额外功能而无需修改主应用代码。侧车容器共享网络和存储,适用于日志收集、监控和安全等任务。文章通过示例展示了如何创建多容器Pod及其共享资源。

Kubernetes上的多容器侧车模式及实操示例

DEV Community
DEV Community · 2025-01-24T07:15:24Z

.NET 开发中的 Exceptionless 是一款开源日志收集工具,能够高效管理和分析日志。通过 NuGet 安装并配置 API 密钥后,用户可以轻松记录异常和自定义事件,从而快速发现和解决问题。

.NET 中的 Exceptionless 日志收集

dotNET跨平台
dotNET跨平台 · 2024-12-31T00:01:40Z

京东科技在K8s集群私有化交付中优化了日志收集方案。新方案用JMQ和JES替代kafka和es,ilogtail负责收集日志,JMQ传递,logstash转换,JES保存。通过配置调整,实现与内部中间件融合,增强系统高可用性和适应性。

纳尼?自建K8s集群日志收集还能通过JMQ保存到JES

京东科技开发者
京东科技开发者 · 2024-09-30T06:34:52Z

Osctrl是一款高效的Osquery安全管理工具,帮助研究人员监控系统、分发配置、收集日志和执行查询。安装需克隆源码并使用脚本部署,配置包括osctrl-tls和osctrl-admin。支持节点管理和标志验证等命令操作。项目遵循MIT开源许可协议,详情见GitHub。

Osctrl:一款快速高效的Osquery安全管理工具

FreeBuf网络安全行业门户
FreeBuf网络安全行业门户 · 2024-09-29T08:09:39Z
云端可观测实践(一)| ECS On Fargate 可观测

Amazon ECS on Fargate 提供了一种无需基础设施管理的简单容器化解决方案,用于应用程序开发。Observability Cloud 能够在 Amazon ECS on Fargate 上实现监控、追踪和日志收集。文章解释了如何在这种环境中实现可观测性,涵盖了指标收集、应用程序追踪和日志收集。

云端可观测实践(一)| ECS On Fargate 可观测

亚马逊AWS官方博客
亚马逊AWS官方博客 · 2024-05-11T03:43:35Z

本文讨论了在nginx.conf文件中配置nginx日志收集的方法,包括设置worker_processes参数控制worker进程数量,编写init_worker_by_lua_block代码实现每个worker进程独立运行,使用ngx.shared共享内存收集日志信息,解释了master进程和worker进程的作用和关系。

nginx日志采集系列(三)-nginx运行进程数

六虎
六虎 · 2024-03-25T06:52:32Z

脚本使用iftop监控分析服务器进程外网流量,并将日志收集到kakfa。脚本执行资源占用情况:CPU:0.1-2%、MEM:0.1%,32M左右。每次脚本启动时删除7天前的日志文件。脚本执行iftop命令捕获输出,获取自动驾驶状态和总发送接收速率。获取本地端口列表,遍历端口获取进程名和pid,并获取发送接收速率。将结果写入日志文件。

Python脚本监控服务器进程上下行流量

安志合的学习博客
安志合的学习博客 · 2024-01-07T11:19:23Z

本文介绍了Kubernetes中的sidecar模式,通过添加边车实现控制和逻辑的分离,包括日志收集、服务注册、服务发现、限流、鉴权等控制面板能力。文章提供了日志收集、请求转发和请求拦截的示例代码。

一步一步教你写kubernetes sidecar

华为云官方博客
华为云官方博客 · 2023-12-29T07:49:35Z
利用 Gateway Load Balancer 打造符合 MLPS2.0 的安全网络架构 – 日志审计篇

本文介绍如何使用Amazon CloudWatch作为集中式日志系统对防火墙进行日志收集与监控,以满足MLPS2.0对安全审计的要求。文章详细介绍了总体架构和部署步骤。

利用 Gateway Load Balancer 打造符合 MLPS2.0 的安全网络架构 – 日志审计篇

亚马逊AWS官方博客
亚马逊AWS官方博客 · 2023-11-07T03:24:42Z
日志排水

本文介绍了Log Drains功能,允许用户轻松收集和转发部署日志到第三方日志服务,如LogDNA和Datadog。该功能支持多种日志格式,提供持久存储、大容量存储和基于日志模式的警报,帮助用户分析和改进应用表现。

日志排水

Vercel News
Vercel News · 2020-01-31T13:00:00Z
ELK日志系统之通用应用程序日志接入方案

本文介绍了高效收集应用程序日志的方法,建议将日志存放在/data/logs/路径,并定义日志输出格式。通过配置Filebeat和Logstash,可以将日志数据发送到Kafka,存储到Elasticsearch,最终通过Kibana展示,帮助开发者及时发现和定位问题。

ELK日志系统之通用应用程序日志接入方案

运维咖啡吧
运维咖啡吧 · 2018-09-05T16:00:00Z
ELK日志系统之使用Rsyslog快速方便的收集Nginx日志

Rsyslog是一种高性能的日志收集服务,支持多种日志输入和输出,能够每秒处理超过百万条日志。通过配置,Nginx日志可直接发送到Rsyslog服务器,简化管理并避免磁盘占满问题。配置后,日志可通过Kafka和Elasticsearch进行处理和存储。

ELK日志系统之使用Rsyslog快速方便的收集Nginx日志

运维咖啡吧
运维咖啡吧 · 2018-08-29T16:00:00Z
中小团队基于Docker的devops实践

本文介绍了日志收集与处理工具链,包括filebeat、rsyslog、kafka、logstash、elasticsearch和kibana。filebeat和rsyslog负责日志收集,kafka处理日志数据,logstash进行过滤并写入elasticsearch,最终通过kibana实现可视化和报表生成。

中小团队基于Docker的devops实践

运维咖啡吧
运维咖啡吧 · 2018-07-02T16:00:00Z
  • <<
  • <
  • 1 (current)
  • >
  • >>
👤 个人中心
在公众号发送验证码完成验证
登录验证
在本设备完成一次验证即可继续使用

完成下面两步后,将自动完成登录并继续当前操作。

1 关注公众号
小红花技术领袖公众号二维码
小红花技术领袖
如果当前 App 无法识别二维码,请在微信搜索并关注该公众号
2 发送验证码
在公众号对话中发送下面 4 位验证码
小红花技术领袖俱乐部
小红花·文摘:汇聚分发优质内容
小红花技术领袖俱乐部
Copyright © 2021-
粤ICP备2022094092号-1
公众号 小红花技术领袖俱乐部公众号二维码
视频号 小红花技术领袖俱乐部视频号二维码