一篇了解 K8s 日志采集与服务质量 QoS

最新推荐文章于 2025-05-08 15:00:00 发布

JavaMonsterr

最新推荐文章于 2025-05-08 15:00:00 发布

阅读量730

点赞数

分类专栏： Java 程序员计算机文章标签： kubernetes docker 容器

本文链接：https://blog.csdn.net/JavaMonsterr/article/details/126084830

版权

本文探讨了Kubernetes中日志采集的三种方式：原生、DaemonSet和Sidecar，分析了它们的优缺点，并强调了在资源占用、运维难度和隔离性等方面的权衡。此外，还介绍了Pod的服务质量QoS类别，建议日志采集Pod使用Burstable或BestEffort以确保Node稳定性。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

引言

应用容器化后的日志采集该选择何种方式？该如何权衡？不同的服务质量QoS对Node的稳定性影响是怎么样的，本文就捋一捋这个。主要内容有：

日志采集三种方式
日志采集方式权衡
Pod服务质量QoS

一、日志采集三种方式

K8s日志采集方式主要有原生方式、DaemonSet采集方式、Sidecar采集方式。

原生方式，日志写入标准输出和标准错误流，可通过 kubectl logs 命令查看输出，如下图。

通过日志轮替工具logrotate实现日志分割、压缩、删除、以及创建新的日志文件。

DaemonSet采集方式，在k8s的node节点上运行日志代理，由日志代理将日志采集到后端服务。

SideCar采集方式，在一个POD中运行一个单独的日志采集代理容器，用于采集容器的日志。

官方也说明了SideCar会带来更多的资源损耗，日志没有被kubelet接管，不能使用kubectl logs访问日志。

小结：基于官方提供的采集方式&

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

JavaMonsterr

关注关注

0
点赞
踩
1

收藏

觉得还不错? 一键收藏
0
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

K8s 日志采集 (Daemonset模式)

Bitile_孟波的博客

06-17

602

Daemonset模式, 采集K8s日志

关于Kubernetes 日志收集的原理，一篇就够了

javassb的博客

04-15

960

关于容器日志 Docker 的日志分为两类，一类是 Docker 引擎日志；另一类是容器日志。引擎日志一般都交给了系统日志，不同的操作系统会放在不同的位置。本文主要介绍容器日志，容器日志可以理解是运行在容器内部的应用输出的日志，默认情况下，docker logs显示当前运行的容器的日志信息，内容包含 STOUT(标准输出) 和 STDERR(标准错误输出)。日志都会以 json-file 的格式存储于/var/lib/docker/containers/<容器id>/<容器id&..

参与评论您还未登录，请先登录后发表或查看评论

k8s01# K8s日志采集与服务质量QoS

gaoliang1719的专栏

07-17

352

引言应用容器化后的日志采集该选择何种方式？该如何权衡？不同的服务质量QoS对Node的稳定性影响是怎么样的，本文就捋一捋这个。主要内容有：日志采集三种方式日志采集方式权衡Pod服务质量QoS一、日志采集三种方式K8s日志采集方式主要有原生方式、DaemonSet采集方式、Sidecar采集方式。原生方式，日志写入标准输出和标准错误流，可通过 kubectl logs 命...

EFK采集k8s日志

cherryの技术文档

01-13

1863

因为方案一在业界使用更为广泛，并且官方也更为推荐，所以我们基于方案一来做k8s的日志采集。

k8s日志收集

梵修

11-04

5702

分布式日志数据统一收集，实现集中式查询和管理故障排查安全信息和事件管理报表统计及展示功能日志查询、问题排查、故障恢复和故障自愈应用日志分析，错误报警性能分析，用户行为分析在节点上进行收集，基于daemonset部署日志收集容器，实现json-file类型（标准输出/dev/stdout，错误输出/dev/stderr）日志收集使用sidecar容器收集当前Pod内一个或多个业务容器的日志，通常基于emptyDir实现业务容器与sidecar容器之间的日志共享。

大数据运维实战指南：资源调度框架YARN/K8s深度解析（第四篇）

资深全栈架构师，乐于在 CSDN 分享技术见解，与大家携手共进，共攀技术巅峰！

03-10

1121

[9]] 【今晚八点有直播】机器学习场景下Volcano集成调度能力实践[[9]][[6]] 多租户固态盘服务质量保障技术综述 - 计算机研究与发展[[3]]：#YARN #Kubernetes #资源调度 #多租户 #弹性伸缩。[[8]] 弹性伸缩服务中实现资源扩展的方式探究 - 天翼云[[8]][[10]] 大数据离在线混部架构，看完这篇就全明白了！[[7]] 多租户云中面向QoS保障的请求调度优化研究[[7]]调整ResourceQuota。NVIDIA GPU拓扑感知。

云原生Kubernetes全栈架构师(基于世界500强的k8s实战课程)

cao_fujiang的博客

01-08

933

第3～7章介绍Docker的基础和镜像的制作优化，以及Kubernetes的基础概念（Master、Node和Pod）、核心调度资源（Deployment、StatefulSet、DaemonSet、CronJob）、服务发布（Service和Ingress）和配置管理（ConfigMap和Secret）。第8～11章主要介绍Kubernetes的持久化存储、动态存储、CSI、高级调度（容忍、污点和亲和力）、服务质量、权限管理、Kubernetes资源配额管理。

基于 QoS 策略的大模型推理服务优化实战：多租户优先级控制、资源调度与延迟保障体系全流程构建

最新发布

努力分享一些人工智能相关的知识干货！

05-08

677

随着大语言模型、多模态模型在实际生产环境中的广泛部署，推理服务系统面临请求类型多样、计算资源紧张、任务延迟敏感性强等挑战。在多租户共用的异构算力平台中，如何动态保障高优任务的服务质量，合理控制资源分配，并避免任务饿死与模型冷启动，成为推理服务系统稳定性与可持续运营的核心难题。本文基于真实企业级部署案例，系统构建了一套以 QoS（Quality of Service）策略为核心的大模型推理服务优化体系，通过任务等级识别、动态优先级控制、GPU 资源感知调度与副本级通道隔离机制，实现对多租户、高并发、混合模型推

从0到1使用Kubernetes系列——Kubernetes入门

Choerodon的博客

08-29

1067

本文是Kubernetes系列推文第一篇，将介绍Docker和Kubernetes两大热门开源产品，主要内容包括：基本概念、基础组件、Kubernetes架构。基本概念 01Docker是什么 Docker 起初是 dotCloud 公司创始人 Solomon Hykes 在法国的时候发起的一项公司内部项目，Docker是基于 dotCloud 公司多年云服务技术的一次革新，在 2013...

K8s日志收集 - Loki

Python Golang

08-17

462

Loki是 Grafana Labs 团队最新的开源项目，是一个水平可扩展，高可用性，多租户的日志聚合系统。它的设计非常经济高效且易于操作，因为它不会为日志内容编制索引，而是为每个日志流编制一组标签。项目受 Prometheus 启发，官方的介绍就是：Like Prometheus, but for logs.，类似于 Prometheus 的日志系统。然后，日志数据本身被压缩并存储在对象存储（例如S3或GCS）中的块中，甚至存储在文件系统本地。小索引和高度压缩的块简化了操作，并大大降低了Loki的成本。

K8s 日志收集-Day 07

qq_42515722的博客

02-16

2366

主要演示了在k8s中两种日志收集的方式

k8s-日志采集：方案1

qq_34482492的博客

02-24

168

日志采集方案

K8S日志收集EFK

henanchenxuyuan的博客

09-03

1653

基于云原生 12 要素开发的程序，一般会将日志直接输出到控制台，并非是指定一个文件存储日志,这一点和传统架构还是有区别的。但是公司内的程序并非都是基于云原生要素开发的，比如一些年代已久的程序，这类程序如果部署至 Kubernetes 集群中，就需要考虑如何将输出至本地文件的日志采集到Elasticsearch。

K8s中EFK日志采集部署

qianshang666的博客

09-11

1420

Kubernetes 集群作为一个整体，我们需要统一收集日志。但是 Kubernetes 并不提供任何日志收集功能，因此您需要设置一个集中的日志后端

k8s日志收集实战（无坑）

热门推荐

运维那些事儿

11-30

1万+

一、k8s收集日志方案简介本文主要介绍在k8s中收集应用的日志方案，应用运行中日志，一般情况下都需要收集存储到一个集中的日志管理系统中，可以方便对日志进行分析统计，监控，甚至用于机器学习，智能分析应用系统问题，及时修复应用所存在的问题。在k8s集群中应用一般有如下日志输出方式直接遵循docker官方建议把日志输出到标准输出或者标准错误输出输出日志到容器内指定目录中应用直接发送日志给日志收...

K8S集群日志收集方案

Cui_Cui_666的博客

01-03

4746

K8S集群日志收集方案K8S集群日志收集方案方案一方案二简单介绍下ELK方案三Docker Image获取 K8S集群日志收集方案在大型分布式部署的架构中，不同的服务模块部署在不同的服务器中，问题出现时，大部分情况需要根据问题暴露的关键信息定位具体的服务器和服务模块。常见的解决思路是建立一套集中式日志收集系统，将所有节点上的日志统一收集、管理、访问，将极大提高定位问题的效率。一个完整的集中式日...

k8s pod 日志收集

wuxingge的博客

07-04

1340

【代码】k8s pod 日志收集。

k8s之Qos（服务质量）

zenglingmin8的博客

11-04

2961

k8s之Qos（服务质量） 1. Qos简介 QoS的英文全称为"Quality of Service",中文名为"服务质量"。在kubernetes中，每个POD都有个QoS标记，通过这个Qos标记来对POD进行服务质量管理，它确定Pod的调度和驱逐优先级。它取决于用户对服务质量的预期，也就是期望的服务质量。对于POD来说，服务质量体现在两个指标上，一个指标是CPU，另一个指标是内存。在实际运行过程中，当NODE节点上内存资源紧张的时候，kubernetes根据POD具有的不同QoS标记，采取不同的处理策

k8s日志收集方案及实战

青梅煮酒

03-17

1843

使用Kafka 客户端管理工具 Offset Explorer查看验证kafka集群状态，关于此工具的使用可以参考：https://blog.csdn.net/qq_39416311/article/details/123316904。和zookeeper部署在相同的主机，下载安装包，下载地址：https://kafka.apache.org/downloads。下载安装包，下载地址：https://zookeeper.apache.org/releases.html。logstash.yml内容如下。