依葫芦画瓢,我用Loki画了个Traefik的面板
mhr18 2025-05-21 15:07 4 浏览 0 评论
依葫芦画瓢,我用Loki画了个Traefik的面板
前段时间在Loki2.0发布时,更新了一个配套的用LogQL语法绘制Nginx监控面板的Demo。今天小白准备用同样的手法炮制一个基于Traefik日志的监控面板。还不清楚之前Nginx面板操作的同学可以看参考文末后的推荐阅读。
Traefik
Traefik是一个用Golang实现的云原生轻量级HTTP反向代理工具。由于它支持配置适配多种后端服务(docker,kubernetes,Mesos,redis)来做动态的路由配置。当前Rancher的边缘产品K3S也默认把Traefik作为默认的Ingress管理器,足以可见traefik也越来越受到广大开发者的喜爱。
那么,Traefik的可观察性除了打开默认的Metrics之外,我们还可以通过日志方式绘制实时监控面板。
配置Access Logs
traefik默认的access log格式如下:
<remote_IP_address> - <client_user_name_if_available> [<timestamp>] "<request_method> <request_path> <request_protocol>" <origin_server_HTTP_status> <origin_server_content_size> "<request_referrer>" "<request_user_agent>" <number_of_requests_received_since_Traefik_started> "<Traefik_router_name>" "<Traefik_server_URL>" <request_duration_in_ms>ms
虽然看起来比较直观,不过这样的日志存入在Loki中,我们还需要通过正则表达式解析,非常的不方便。所以我们还是将日志格式改为json,方便logql解析。
按如下方式修改traefik.yaml
accessLog:
format: json
默认traefik的日志输出为stdout,如果你的采集端是通过读取文件的话,则需要用filePath参数将traefik的日志重定向到文件目录
绘制Grafana面板
大体的监控面板,小白已经绘制好并发布到Grafana Lab,我们访问页面
https://grafana.com/grafana/dashboards/13713就可以将面板下载到本地
将下载的面板json文件导入到Grafana,导入后更换uid和Loki源
导入后你将获得一个空白的面板,如下
别急,空白的原因是logql没有查询到合适日志,我们需要修改每个panel的查询语句,让他定位到合适的日志。面板默认的日志标签是{job="/var/log/traefik.log"},我们需要改成适应自己环境的label
最后就能得到如下面板,在这里我们可以看到经过Treafik的HTTP请求状态,请求耗时以及路由分布等信息。
总结
Traefik的面板仅仅只是依葫芦画瓢的抄袭了官方的Nginx面板,不过在"抄袭"的过程中也能学习到几个LogQL的重要语句的使用场景。
- 样本排序统计百分位
在TP95的面板中我们使用了如下语法,主要的意思是将traefik日志中的Duration值按照时间变量$__interval进行排序,取第95%位上的值
quantile_over_time(0.95,{job="xxx"}
|= "RequestProtocol"
| json
| unwrap Duration
| __error__="" [$__interval]) by (ServiceName)
- 统计请求异常率
在异常请求率的面板中,我们不光使用了Label filters来过滤状态中大于400的请求,同时还用除法/来计算整体的异常百分比。
sum(rate({job="xxx"}
|~ "RequestProtocol"
| json
| OriginStatus >= 400
|__error__=""[$__interval]))
/ (sum(rate({job="xxx"}
|~ "RequestProtocol"
| json
| __error__=""[$__interval]))
/ 100)
可以看到,LogQL v2强大的日志查询分析能力让日志的可玩性大幅提升。和Prometheus一样,Loki作为云原生可观测性下的日志一环,其后续发展也越来越值得关注。
关注公众号「云原生小白」,获取更多精彩内容
相关推荐
- 互联网大厂后端必看!Spring Boot 如何实现高并发抢券逻辑?
-
在当今电商、本地生活服务等行业的各类促销活动里,高并发抢券的场景极为常见。就拿双11、618购物节来说,平台发放的优惠券数量有限,然而参与抢券的用户可能达到百万甚至千万级别,瞬间产生的高并发请求,...
- 高并发秒杀系统的解决方案
-
面对秒杀活动的高并发压力,系统需要从前端到后端全面优化。一、前端三板斧是核心:加机器扩容:直接增加服务器数量,用「人海战术」扛住流量峰值。静态化页面:把图片、文字等固定内容提前保存成静态文件,通过CD...
- Quarkus集成Redis缓存加速与高并发事务避坑指南
-
一、为什么你的微服务需要Redis?在日均百万级请求的电商场景中,某核心接口响应时间从200ms降至12ms,秘诀在于合理使用Redis缓存。但在高并发场景下,错误的事务处理曾导致3000笔订单超卖,...
- 网络投票系统,Redis如何抗住瞬间高并发?
-
咱们现在在网上参与个投票活动,简直是家常便饭!无论是给喜欢的选秀爱豆打call,还是评选“年度优秀员工”,亦或是参与某个社会热点话题的民意调查,动动手指,投出自己神圣的一票,简单又方便。但你有没有想过...
- 一起挖矿病毒事件的深度分析,结果你竟想不到
-
起因朋友公司遇到了一起挖矿病毒事件,找我帮忙看看。入侵分析基本信息检查当我登录服务器做检测时,top回显并未发现异常进程:但是在crontab中发现一条异常的定时任务:通过访问定时任务中的url,发现...
- Redis 分布式锁的续期与脑裂问题解决方案
-
Redis分布式锁的续期与脑裂问题解决方案分布式锁在高并发场景中至关重要,但使用Redis实现时会面临两个关键挑战:锁续期和脑裂问题。以下是详细解决方案:一、锁续期问题解决方案1.自动续期机制...
- Redis的“兄弟姐妹”们:Memcached、MongoDB,它们有何不同?
-
咱们常说“一个好汉三个帮”。Redis虽然在很多领域都表现抢眼,但它也不是一个人在战斗!在广阔的NoSQL(NotOnlySQL,泛指非关系型数据库)世界里,Redis还有不少“兄弟姐妹”。它们各...
- 阿里淘外商业化广告工程架构实践
-
大型广告系统工程方面的主要挑战就是海量数据,快速响应,数据实时和高可用度的要求。本次分享介绍了阿里创新事业群智能营销平台在如何构建高性能、高可用、高效率,低成本的广告系统架构方面所做的诸多工作及实践经...
- TP-LINK面试真题和答案,您能做对几道?
-
话说TP-LINK联洲的秋招提前批已经开启很久了,6月份就已经开启了,并且最近已经有人陆陆续续拿到口头Offer了,所以今天就来给大家介绍一下TP-LINK的面试流程和真题及答案解析。秋...
- 六星教育PHP大神进阶班怎么样?值不值得去听?
-
点进这篇文章的人可能现在正面临着几个很难选择的问题,比如学PHP要不要报培训班?或者是该怎样选择PHP课程?又或是六星教育的PHP大神进阶班好不好,能不能去?在这里就给你们都一个一个解答了!首先,要...
- 写给技术工程师的十条精进原则
-
本文是美团技术专家以自己多年的从业经验总结出了十条精进原则,包括个人层面、团队层面和效能层面,希望也能够给视觉算法工程师们带来一些启发,更好地指导行动。作者|云鹏来源|美团技术团队引言时间回到...
- 谈谈Linux epoll惊群问题的原因和解决方案
-
近期排查了一个问题,epoll惊群的问题,起初我并不认为这是惊群导致,因为从现象上看,只是体现了CPU不均衡。一共fork了20个Server进程,在请求负载中等的时候,有三四个Server进程呈现出...
- PHP培训课程内容都有哪些?PHP培训哪些内容?
-
作为一门经久不衰的开发语言,php开发工程师一直是很多年轻人选择学习和就业的职业方向,那么PHP培训课程主要学习哪些内容呢?一、企业级开发专题:深入剖析企业实际开发过程,教授最实用的企业级技术PHP7...
- 依葫芦画瓢,我用Loki画了个Traefik的面板
-
依葫芦画瓢,我用Loki画了个Traefik的面板前段时间在Loki2.0发布时,更新了一个配套的用LogQL语法绘制Nginx监控面板的Demo。今天小白准备用同样的手法炮制一个基于Traefik日...
- 揭开微盟百万商家营销大战背后的数据库秘密
-
又到了双十一、双十二、年终大促季,每年这个时候都是购物狂欢节,不仅促销产品多、种类全、覆盖面广,促销花样也在不断翻新,直播、砍价、优惠券、加价购等,令人眼花缭乱。当全国人民沉浸在买买买的自嗨中无法自拔...
你 发表评论:
欢迎- 一周热门
- 最近发表
- 标签列表
-
- oracle位图索引 (63)
- oracle批量插入数据 (62)
- oracle事务隔离级别 (53)
- oracle 空为0 (50)
- oracle主从同步 (55)
- oracle 乐观锁 (51)
- redis 命令 (78)
- php redis (88)
- redis 存储 (66)
- redis 锁 (69)
- 启动 redis (66)
- redis 时间 (56)
- redis 删除 (67)
- redis内存 (57)
- redis并发 (52)
- redis 主从 (69)
- redis 订阅 (51)
- redis 登录 (54)
- redis 面试 (58)
- 阿里 redis (59)
- redis 搭建 (53)
- redis的缓存 (55)
- lua redis (58)
- redis 连接池 (61)
- redis 限流 (51)