avatar
文章
30
标签
17
分类
5
主页
归档
标签
分类
友情链接
关于我
语言
  • 简体中文
  • English
Logo蒜头耿鬼's Blog
搜索
主页
归档
标签
分类
友情链接
关于我
语言
  • 简体中文
  • English

蒜头耿鬼's Blog

Kubernetes 日志收集(五)- 使用 Kafka 做中间层
发表于2024-09-23|更新于2024-09-23|云原生|Kubernetes•Logging
前言之前基于 Fluent-bit Daemonset 的日志收集中,是由 fluent-bit 直接采集到 elasticsearch 中,当我们的日志量非常大的情况下,这样会造成 elasticsearch 压力过大,甚至会因此丢失日志,所以我们最好在采集器到保存的中间加上一个中间层,我们选择使用 kafka 作为中间层 配置 Outputfluent-bit 其余配置保持不变,需要替换 Output 的相关配置 [OUTPUT] name kafka match kube.* brokers <your brokers addresses> topics <your topic name> # sasl auth rdkafka.security.protocol SASL_PLAINTEXT rdkafka.sasl.mechanisms SCRAM-SHA-256 rdkafka.sasl.username <user> rdkafka.sasl.password...
提高 WSL 使用体验的小方法
发表于2024-08-15|更新于2024-08-21|Linux|Linux•Shell•WSL
一些在使用 WSL 中可以提高“幸福感”的方法
从零实现CI/CD(二)- Jenkins 配置流水线
发表于2024-07-04|更新于2024-07-11|云原生|Kubernetes•DevOps•Jenkins
配置 Jenkins 流水线的一些准备工作,以及如何使用 Jenkinsfile 快速的构建代码
Kubernetes 日志收集(四)- 基于 Fluent-bit Daemonset 的日志收集
发表于2024-05-22|更新于2024-06-05|云原生|Kubernetes•Logging
如果我们不想使用 Logging Operator,当然也可以自己配置 Fluent-Bit 通过 Daemonset 进行节点 POD 日志的收集
Kubernetes 日志收集(三)- Logging operator 中使用 concat 多行合并相关问题
发表于2024-05-13|更新于2024-06-05|云原生|Kubernetes•Logging
解决在 Logging operator 的 Flow 中,使用 concat 插件解决多行合并,出现的一些问题
KEDA - 基于 Kubernetes 的事件驱动自动缩放器
发表于2024-03-25|更新于2024-04-05|云原生|Kubernetes•HPA
KEDA(全称:Kubernetes-based Event Driven Autoscaler)是一个基于 Kubernetes 的事件驱动自动缩放器。 借助 KEDA,可以根据需要处理的事件数量来驱动 Kubernetes 中任何容器的扩展。
Kubernetes 日志收集(二)- 基于 Logging operator 的日志收集
发表于2024-03-21|更新于2024-06-05|云原生|Kubernetes•Logging
Logging Operator 通过自动部署和配置 Kubernetes 日志管道来解决 Kubernetes 环境中与日志记录相关的问题。
Kubernetes 日志收集(一)- 基于 SideCar 模式的日志收集
发表于2024-03-17|更新于2024-06-05|云原生|Kubernetes•Logging
基于 SideCar 模式的日志收集原理是,Pod 将日志打印到对应文件夹中,SideCar 与应用同时挂载此文件夹,来达到收集日志的目的。
Ceoh 集群 OSD Down 问题解决
发表于2024-03-13|更新于2024-03-19|云原生|Kubernetes•Storage•Ceph
记录一次 Ceph OSD down 的问题,将故障 OSD 对应磁盘还原成裸盘重新接入集群。
Rook-ceph 开启卷快照功能
发表于2024-03-08|更新于2024-03-09|云原生|Kubernetes•Storage•Ceph
VolumeSnapshot 是用户对卷快照的请求。它类似于 PersistentVolumeClaim,使用 VolumeSnapshot 可以用于对 PVC 进行快照备份,VolumeSnapshot 功能支持 CSI v1.0 及更高版本。它在 Kubernetes v1.12 中作为 Alpha 功能引入,并在 Kubernetes 1.17 中提升为 Beta 功能。在 Kubernetes 1.20 中,卷快照功能移至 GA。
123
avatar
背着蒜头的耿鬼
文章
30
标签
17
分类
5
Follow Me
最新文章
Kubernetes 日志收集(五)- 使用 Kafka 做中间层2024-09-23
提高 WSL 使用体验的小方法2024-08-15
从零实现CI/CD(二)- Jenkins 配置流水线2024-07-04
Kubernetes 日志收集(四)- 基于 Fluent-bit Daemonset 的日志收集2024-05-22
Kubernetes 日志收集(三)- Logging operator 中使用 concat 多行合并相关问题2024-05-13
分类
  • Linux5
  • Mysql1
  • Redis3
  • 云原生18
  • 大数据3
标签
Redis Nginx Logging Spark Ceph Storage Jenkins Shell HPA Database Doris DevOps Linux Kubernetes Mysql Flink WSL
归档
  • 九月 2024 1
  • 八月 2024 1
  • 七月 2024 1
  • 五月 2024 2
  • 三月 2024 5
  • 二月 2024 3
  • 一月 2024 1
  • 八月 2023 1
网站信息
文章数目 :
30
本站总字数 :
40.1k
最后更新时间 :
©2022 - 2025 By 背着蒜头的耿鬼
框架 Hexo|主题 Butterfly
搜索
数据加载中