亚马逊AWS官方博客
·
使用 FluentBit 抽取日志到 AOS 中不同索引 Index
💡
原文中文，约5200字，阅读约需13分钟。
📝
内容提要
AWS OpenSearch Service（AOS）是基于Elasticsearch的日志搜索和分析引擎，具备可扩展性、实时搜索和强大查询功能。FluentBit用于收集和分类存储日志，需在私有VPC内创建AOS集群，并通过Windows跳板机访问Dashboard。
🎯
关键要点
- AWS OpenSearch Service（AOS）是基于Elasticsearch的日志搜索和分析引擎，具备高度可扩展性、实时搜索和强大查询功能。
- FluentBit用于收集和分类存储日志，支持多种类型的日志隔离保存和访问控制。
- AOS集群应在私有VPC内部署，用户通过Windows跳板机访问Dashboard。
- 创建AOS集群时，推荐在私有子网内，避免安全隐患。
- EC2实例需在公共子网内创建，并具备访问AOS的IAM角色权限。
- FluentBit可通过一键部署或yum命令安装，并需配置日志输入输出。
- 在AOS中添加Index前需手动创建，并确保安全组配置允许访问。
- 通过DSL命令创建系统日志和安全日志索引，并确认创建成功。
- 为FluentBit使用的IAM角色添加必要的Opensearch权限，以避免启动服务时的报错。
- 本方案实现了通过FluentBit从服务器抽取不同类型的日志数据，并在同一AOS域中分类保存。
❓
延伸问答
AWS OpenSearch Service（AOS）有什么主要特点？
AOS具备高度可扩展性、近乎实时搜索、强大的查询和分析功能、高可用性和容错性，以及多层安全控制。
如何在AWS中创建AOS集群？
推荐在私有VPC的子网内创建AOS集群，并通过Windows跳板机访问Dashboard。
FluentBit如何与AOS集成？
FluentBit用于收集和分类存储日志，可以将不同类型的日志发送到AOS中的不同索引。
在AOS中如何添加索引？
在运行FluentBit新配置前，需要手动在Opensearch集群中添加索引，并确保安全组配置允许访问。
FluentBit的安装步骤是什么？
可以通过一键部署脚本或yum命令安装FluentBit，并需配置日志输入输出。
使用FluentBit时需要注意哪些IAM权限？
需要为FluentBit使用的IAM角色添加必要的Opensearch权限，以避免启动服务时的报错。
🏷️
标签
➡️
