Update nexus: fix conflicts and sync local changes
This commit is contained in:
@@ -1,60 +1,60 @@
|
||||
---
|
||||
title: "ELK Stack"
|
||||
type: concept
|
||||
tags: [DevOps, Observability, Logging, OpenSource, AWS]
|
||||
sources: [ctp-topic-54-esm-saas-log-analytics]
|
||||
last_updated: 2026-04-25
|
||||
---
|
||||
|
||||
# ELK Stack
|
||||
|
||||
**ELK Stack** 是由 Elasticsearch、Logstash 和 Kibana 三个开源组件组成的日志分析与全文检索技术栈,是企业级日志分析的业界标准方案。
|
||||
|
||||
## Components
|
||||
|
||||
| Component | Role | Description |
|
||||
|-----------|------|-------------|
|
||||
| **Elasticsearch** | 存储与检索引擎 | 分布式全文搜索和分析引擎,负责存储和查询日志数据 |
|
||||
| **Logstash** | 数据处理管道 | 采集、解析和转换日志字段,为每列数据赋予语义 |
|
||||
| **Kibana** | 可视化前端 | 日志文件可视化和分析的用户界面 |
|
||||
| **BEATS** | 轻量级采集代理 | 部署在应用侧的日志采集器家族(Filebeat/Metricbeat 等) |
|
||||
|
||||
## Architecture
|
||||
|
||||
```
|
||||
应用层 (Application VPC)
|
||||
└── Filebeat (容器/DaemonSet) → 持续采集日志
|
||||
↓
|
||||
日志层 (Logging VPC)
|
||||
└── Logstash → 解析日志字段
|
||||
↓
|
||||
└── (Redis Buffer, 可选) → 防止 Logstash 过载
|
||||
↓
|
||||
└── Elasticsearch / OpenSearch → 存储索引
|
||||
↓
|
||||
└── Kibana → 可视化查询
|
||||
```
|
||||
|
||||
## OpenSearch (AWS Fork)
|
||||
|
||||
**OpenSearch** 是 Elasticsearch 7.10.2 的开源分支,由 AWS 主导维护,提供与 Elasticsearch 兼容的 API,作为 AWS 托管服务(Amazon OpenSearch Service)提供。ELK 栈中 Elasticsearch 可被 OpenSearch 无缝替代。
|
||||
|
||||
## Related Concepts
|
||||
|
||||
- [[Centralized-Logging]]:集中式日志管理的总体概念,ELK 是其核心实现技术
|
||||
- [[Cloud-Monitoring]]:可观测性三支柱(指标/日志/链路追踪)之一
|
||||
- [[OpenSearch]]:ELK 中 Elasticsearch 的 AWS 托管替代
|
||||
- [[Kibana]]:ELK 栈的可视化层
|
||||
- [[BEATS]]:ELK 栈的轻量级日志采集代理
|
||||
|
||||
## Key Claims
|
||||
|
||||
- ELK 栈是开源日志分析的标准方案,架构成熟、生态丰富
|
||||
- Filebeat 常用作 Kubernetes 容器环境下的日志采集器(DaemonSet 部署)
|
||||
- Logstash 作为处理管道,可解析 JSON/Nginx/Apache 等多格式日志
|
||||
- OpenSearch 是 Elasticsearch 的开源分支,AWS 提供托管服务(OpenSearch Service)
|
||||
- VPC 间日志传输走私有网络,不经过互联网
|
||||
|
||||
## Sources
|
||||
|
||||
- [[ctp-topic-54-esm-saas-log-analytics]]
|
||||
---
|
||||
title: "ELK Stack"
|
||||
type: concept
|
||||
tags: [DevOps, Observability, Logging, OpenSource, AWS]
|
||||
sources: [ctp-topic-54-esm-saas-log-analytics]
|
||||
last_updated: 2026-04-25
|
||||
---
|
||||
|
||||
# ELK Stack
|
||||
|
||||
**ELK Stack** 是由 Elasticsearch、Logstash 和 Kibana 三个开源组件组成的日志分析与全文检索技术栈,是企业级日志分析的业界标准方案。
|
||||
|
||||
## Components
|
||||
|
||||
| Component | Role | Description |
|
||||
|-----------|------|-------------|
|
||||
| **Elasticsearch** | 存储与检索引擎 | 分布式全文搜索和分析引擎,负责存储和查询日志数据 |
|
||||
| **Logstash** | 数据处理管道 | 采集、解析和转换日志字段,为每列数据赋予语义 |
|
||||
| **Kibana** | 可视化前端 | 日志文件可视化和分析的用户界面 |
|
||||
| **BEATS** | 轻量级采集代理 | 部署在应用侧的日志采集器家族(Filebeat/Metricbeat 等) |
|
||||
|
||||
## Architecture
|
||||
|
||||
```
|
||||
应用层 (Application VPC)
|
||||
└── Filebeat (容器/DaemonSet) → 持续采集日志
|
||||
↓
|
||||
日志层 (Logging VPC)
|
||||
└── Logstash → 解析日志字段
|
||||
↓
|
||||
└── (Redis Buffer, 可选) → 防止 Logstash 过载
|
||||
↓
|
||||
└── Elasticsearch / OpenSearch → 存储索引
|
||||
↓
|
||||
└── Kibana → 可视化查询
|
||||
```
|
||||
|
||||
## OpenSearch (AWS Fork)
|
||||
|
||||
**OpenSearch** 是 Elasticsearch 7.10.2 的开源分支,由 AWS 主导维护,提供与 Elasticsearch 兼容的 API,作为 AWS 托管服务(Amazon OpenSearch Service)提供。ELK 栈中 Elasticsearch 可被 OpenSearch 无缝替代。
|
||||
|
||||
## Related Concepts
|
||||
|
||||
- [[Centralized-Logging]]:集中式日志管理的总体概念,ELK 是其核心实现技术
|
||||
- [[Cloud-Monitoring]]:可观测性三支柱(指标/日志/链路追踪)之一
|
||||
- [[OpenSearch]]:ELK 中 Elasticsearch 的 AWS 托管替代
|
||||
- [[Kibana]]:ELK 栈的可视化层
|
||||
- [[BEATS]]:ELK 栈的轻量级日志采集代理
|
||||
|
||||
## Key Claims
|
||||
|
||||
- ELK 栈是开源日志分析的标准方案,架构成熟、生态丰富
|
||||
- Filebeat 常用作 Kubernetes 容器环境下的日志采集器(DaemonSet 部署)
|
||||
- Logstash 作为处理管道,可解析 JSON/Nginx/Apache 等多格式日志
|
||||
- OpenSearch 是 Elasticsearch 的开源分支,AWS 提供托管服务(OpenSearch Service)
|
||||
- VPC 间日志传输走私有网络,不经过互联网
|
||||
|
||||
## Sources
|
||||
|
||||
- [[ctp-topic-54-esm-saas-log-analytics]]
|
||||
|
||||
Reference in New Issue
Block a user