乐胖代购免代理版

prometheus使用 (六) 核心监控指标了解

在上⼀⼩节中，我们已经看到了类似于irate()这样的函数，可以帮助我们计算监控指标的增⻓率。除此之外， Prometheus还提供了其它⼤量的内置函数，可以对时序数据进⾏丰富的处理。本⼩节将带来读者了解⼀些常⽤的内置函数以及相关的使⽤场景和⽤法...

promehtues

kubernetes

linux

centos

数据

原创 2021-11-09 10:34:27 1858 阅读

prometheus使用 (四) 瞬时向量与区间向量

PromQL是prometheus内置的查询语言，与mysql的select类似，在prometheus中查询数据、告警、可视化中都非常有用一. 基于指标查询node_cpu_seconds_total返回...node_cpu_seconds_total{cpu="0", instance="192.168.1.21:9100", job="node", mode="user"} 690.78node_cpu_seconds_total{cpu="1", instance="1.

prometheus

linux

promQL

kubernetes

数据

原创 2021-11-09 10:34:27 1889 阅读

prometheus使用 (八) 小结--综合查询

前面我们看了一大堆的语法，这章不开新东西。主要是展示一些常用的案例o(*￣▽￣*)o1. 查询cpu使用率#还记得irate不？计算区间向量中的最后的两个值来算速率irate(node_cpu_seconds_total{instance="192.168.1.21:9100"}[5m])#但是cpu中的模式比较多，并不方便我们使用...

prometheus

kubernetes

centos

linux

数据

原创 2021-11-09 10:34:26 759 阅读

prometheus使用 (九) 查询持久化--记录规则

前言#当你用promQL查询一个信息，然后再查询下一个记录时，上一个记录就会消失#而查询的持久化，可以帮助我们持久的使用查询语句,实现的方法主要有3种1. 记录规则 #根据查询创建新指标2. 警报规则 #以查询生成警报3. 可视化规则 #grafana等仪表盘上的语句案例基于5分钟计算cpu使用率#创建记录规则目录mkdir /etc/prometheus/rules && cd $_#添加规则文件cat > no...

prometheus

kubernetes

centos

docker

查询语句

原创 2021-11-09 10:34:25 808 阅读

prometheus使用 (十) 服务发现

在之前我们的服务发现主要依赖于静态的服务发现，如下对于指定的每个目标，在抓取配置中手动列出他们的"ip"和"端口"这种方法在监控主机较少的情况下还行，但不适合大规模的集群尤其不适合用于使用容器和基于云的实例的动态集群，这些实例经常会出现变化的，创建或消耗的情况Prometheus通过使用"服务发现"来通过自动化的机制来检测、分类和试别新的变更的目标。服务发现分类#服务发现的方法大致有以下3种1. file_sd_configs # 基于文件列表来服务发现2....

k8s

kubernetes

prometheus

prom

服务发现

原创 2021-11-09 10:34:24 664 阅读

prometheus使用 (十一) alertmanager集群部署

一. alertmanager是做什么的官方地址https://prometheus.io/还记得上面这张图不？我们前面已经了解到如何去做服务发现、节点资源监控、可视化等等我们前面做了这么多监控收集，为的就是在出现故障的时候及时给我们提个醒，这章就是怎么去做报警规则不过再此之前，我们需要先知道alertmanager是怎么去处理报警的，如下图中所示二. 告警工作原理说明#首先在prometheus定义报警规则,比如我们通过判断up指标中节点的值是否等于1来判断服..

kubernetes

prometheus

linux

centos

配置文件

原创 2021-11-09 10:34:23 1964 阅读

prometheus使用 (十二) 简单告警配置

Alertmanager除了提供基本的告警通知能?以外，还主要提供了如：分组、抑制以及静默等告警特性1.分组

kubernetes

prometheus

linux

centos

lua

原创 2021-11-09 10:34:22 3369 阅读 1点赞

prometheus使用 (十四) 告警模板配置

5. AlertManager 配置自定义邮件模板看到上边默认发送的邮件模板，虽然所有核心的信息已经包含了，但是邮件格式内容可以更优雅直观一些，那么，AlertManager 也是支持自定义邮件模板配置的，首先新建一个模板文件 email.tmpl。cat > /etc/alertmanager/alertmanager.yml <<EOFglobal: resolve_timeout: 5m smtp_from: '2665483426@qq.com' sm

kubernetes

prometheus

centos

linux

html

原创 2021-11-09 10:31:16 4848 阅读 1点赞

小技巧 (十) ansible批量抓取多个节点上的不同文件

当我们集群节点的数量变的非常多时，维护起来就变得非常麻烦，比如，今天我有个需求就是抓取多个主机上的文件如果节点文件都相同，一个fetch就够了，但是每个节点的文件名都不同，甚至是多个文件。就有点麻烦了。---- hosts: master #操作对象 hosts文件中必须存在 remote_user: root tasks: - name: chaxun find: paths: /tmp/ #准备..

小技巧

linux

centos

ansible

文件名

原创 2021-11-09 10:31:15 1174 阅读

prometheus使用 (十三) QQ邮件告警

四. 配置邮件告警我们这里以qq邮箱为案例，不过在配置之前我们需要先获取你邮箱的一个安全码用于向你的邮箱发送信息配置qq邮箱安全码添加alertmanager报警信息global: resolve_timeout: 5m smtp_from: '2665483426@qq.com' smtp_smarthost: 'smtp.qq.com:465' smtp_auth_username: '2665483426@qq.com' smtp_auth_pas

kubernetes

prometheus

centos

linux

qq邮箱

原创 2021-11-09 10:31:14 3377 阅读 1点赞

小技巧 (十一) ansible普通用户执行

[web]192.168.1.21 ansible_ssh_user="liuwei" ansible_ssh_pass="333" ansible_become_pass="123"ansible_ssh_user="liuwei" #普通用户ansible_ssh_pass="123" #登陆普通用户密码ansible_become_pass="123" #sudo借权密码ansible -i hosts web -m shell -a "mkdir /r.

centos

ansible

linux

普通用户

root用户

原创 2021-11-09 10:31:14 1383 阅读

prometheus使用 (十五) alertmanager特性--分组

二. alertmanager的特性Alertmanager除了提供基本的告警通知能力以外，还主要提供了如：分组、抑制以及静默等告警特性1. 分组分组机制可以将详细的告警信息合并成一个通知。在某些情况下,比如由于服务器宕机导致大量的告警被同时触发，在这种情况下分组机制可以将这些被触发的告警合并为一个告警通知密码一次性接收大量的告警通知，而无法锁定问题例如: 当集群中有数百个正在运行的服务实例,并且为每一个实例都设置了告警规则加如此时发送了网络故障，可能导致大量的服务实例无法连

kubernetes

prometheus

alertmanager

centos

服务器

原创 2021-11-09 10:31:13 2475 阅读 1点赞 1评论

删除5天前的文件

#定义初始目录dir_chushi=/root/test1#检查备份的目录5天前的文件，如果有则删除for i in `find $backup_del_dir -type f -mtime +5`; do rm -f $i;done

Linux

原创 2021-11-09 10:31:13 969 阅读

prometheus使用 (十六) alertmanager特性--告警抑制

2. 抑制抑制是指当某?告警发出后，可以停?重复发送由此告警引发的其它告警的机制。例如，当集群不可访问时触发了?次告警，通过配置Alertmanager可以忽略与该集群有关的其它所有告警。这样可以避免接收到?量与实际问题?关的告警通知。抑制机制同样通过Alertmanager的配置?件进?设置。抑制是指某一告警发出后，可以停止重复发送由此告警引发的其他告警的机制（我们也不想，节点一宕机，pod全给你报错吧）例如: 集群不可访问时触发了一次告警，通过配置alertmanager可以忽...

kubernetes

prometheus

alertmanager

docker

服务器

原创 2021-11-09 10:31:12 2147 阅读 1收藏

ansible使用时遇到的问题

}10.2xx.xxx.xxx | FAILED! => { "ansible_facts": { "discovered_interpreter_python": "/usr/bin/python" }, "changed": false, "module_stderr": "Shared connection to 10.2xx.xxx.xxx closed.\r\n", "module_stdout": "\r\n", .

python

sed

用户登陆

Linux

原创 2021-11-09 10:31:11 1027 阅读

docker小技巧（一）使用iptables 映射docker容器端口

有天同事问我的问题，怎么给已有的容器不停止的情况下添加映射(。・∀・)ノ（我擦，我防火墙也不太懂）#需要开启路由转发echo "net.ipv4.ip_forward=1" >> /etc/sysctl.confsysctl -p#查看容器iddocker inspect [container_name] | grep IPAddress#添加转发iptables -t nat -A DOCKER -p tcp --dport 8082 -j DNAT --to 1.

docker

ipad

Linux

原创 2021-11-09 10:31:11 863 阅读

小技巧 (十二) 使用yum获取软件包

我们如果想要在离线环境下部署服务，通常需要找到相应的一个软件包（tar、rpm）但是有每个包可能都需要很多依赖，本地的yum源里可能没有、单独找又很麻烦案例获取ansible软件包#装过ansible的小伙伴都知道，他有数十个依赖包单单去找到就很麻烦#拉取epel源rpm -ivh https://dl.fedoraproject.org/pub/epel/epel-release-latest-7.noarch.rpm#获取ansible的软件包yum -y insta.

linux

centos

yum

依赖包

yum源

原创 2021-11-09 10:31:07 178 阅读

prometheus使用 (十七) alertmanager特性--静默

3. 静默静默提供了一个简单的机制可以快速根据标签对告警进行静默处理。如果接收到的告警符合静默的配置alertmanager则不会发送告警通知，静默需要在alertmanager的web页面上配置

prometheus

alertmanager

kubernetes

linux

静音

原创 2021-11-09 10:31:07 1065 阅读

prometheus使用 (十八) pushgateway自定义指标收集

前面我们的数据大部分都是由节点上的agent端收集本地数据后暴露到/metrics，再由prometheus pull到本地进行存储展示的但是终归这种指标收集的方法是有局限性的，并且有可能被其他如防火墙等安全机制拦截，又或者我们的client端并不能采集到我们想要的指标那么在这种情况下，我们可以通过一个工具Pushgateway 来进行代理，将其他区域或自定义的指标收集并提交到prometheus上一. 部署pushgateway#拉取软件包wget https://githu..

pushgateway

prometheus

k8s

推送

json

原创 2021-11-09 10:31:06 2877 阅读

prometheus使用 (十九) 标签重写

在prometheus的target实例中都包含一些Metadata标签信息，如下#当prometheus加载target实例后，会有一些默认的标签#以下标签都会声明prometheus该如何从target实例中获取指标__address__ #当前Target实例的访问地址<host>:<port>__scheme__ #采集目标服务访问地址的HTTP Scheme，HTTP或者HTTPS__metrics_path__ .

k8s

prometheus

linux

centos

数据

原创 2021-11-09 10:31:05 3570 阅读

计算支付宝基础算率

import java.math.BigDecimal;public class Test { public static void main(String[] args) { BigDecimal baseBit = new BigDecimal("0.006"); BigDecimal ceshi = new BigDecimal("1000"); BigDecimal realAmount = ceshi.subtract(ceshi.mu.

ide

自动补全

java

Linux

原创 2021-11-09 10:31:04 241 阅读

linux

bash

无法删除

Linux

原创 2021-11-09 10:31:04 745 阅读

harbor错误

1. 解析错误导致harbor无法登陆Error response from daemon: Get http://xxx.xxx.xxx.xxx:8082/v2/: Get http://harbor-213:8082/service/token?account=admin&client_id=docker&offline_token=true&service=harbor-registry: net/http: request canceled while waitin

域名解析

解决方法

ip地址

连接失败

docker

原创 2021-11-09 10:31:03 1483 阅读

configmap更新报错记录

环境很老了，prometheus的yaml文件已经找不到了，现在要修改configmaps的配置为了方式出现异常，我们先将cm导出kk get pod prometheus-config -o yaml > prom.yml导出后，我首先 apply 了一下确认是当前使用的yaml但是我改完配置后apply时报一下的问题for: "prometheus-config.yaml": Operation cannot be fulfilled on configmaps ...

时间戳

配置文件

新版本

Linux

原创 2021-11-09 10:31:03 551 阅读

helm 工具命令补全

helm completion bash > ~/.hermrc ;source ~/.helmrc

bash

Linux

原创 2021-11-09 10:31:02 368 阅读

小技巧（十四） windows批量清除空目录

平时我们装软件，光记得别把软件装C盘，但是各种更新、碎片、文档、默认下载等乱七八糟的的东西还是会占满的，装装卸卸后发现多出来很多的空目录，有一天C盘快满了才想着去清理，但是大量的空目录的导致我们清理起来及其麻烦所以，我们就需要一些工具来帮助我们清理这些空目录@echo offfor /f "delims=" %%a in ('dir /ad /b /s C:\Users\^|sort /r') do (rd "%%a">nul 2>nul &&echo .

Linux

原创 2021-11-09 10:31:02 548 阅读

记录coredns外部无法解析的情况

我们这边coredns的策略模式是 dnsPolicy: Default他的一个解析模式是从宿主机获取/etc/resolv.conf挂载到容器中进行解析为了方便我们平时测试解析是否正常，以及容器，如下nameserver POD_IDnameserver 169.169.0.100search svc.cluster.local cluster.localoptions ndots:5但是有一次配置时出现了一个情况，我们在外部去curl解析时报错[root@192-168.

edn

策略模式

地址解析

Linux

原创 2021-11-09 10:31:01 752 阅读

修复XFS文件系统的过程

通过告警得知，有一台节点进入notready状态，登陆主机排查发现node组件异常，通过日志分析得知数据盘异常，切换到挂载盘目录下发现无法正常写入状态如下[root@k8s-master /app ]# lsls: cannot access app: Input/output error解决方法#卸载挂载umount /app#返回设备正忙，无法卸载说明有进程还在挂载中跑#通过lsof /dev/mapper/vg--docker-lvapp #没有看到进...

docker

解决方法

日志分析

数据盘

it技术

原创 2021-11-09 10:25:58 701 阅读

helm 异常

1. helm install异常，实体太大[root@192-168-1-20 helm_setup]# helm install calico .Error: create: failed to create: Request entity too large: limit is 3145728

git

解包

ico

解决方法

it技术

原创 2021-11-09 10:25:58 1053 阅读

pod异常

1记录一次pod无法创建控制器创建完成了，但是pod副本数量一直为0原因，deploymen中含有sa，没有做权限一般是有PVC 或者 sa没挂上

it技术

原创 2021-11-09 10:25:57 151 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

默子昂的博客

prometheus使用 (六) 核心监控指标了解

prometheus使用 (四) 瞬时向量与区间向量

prometheus使用 (八) 小结--综合查询

prometheus使用 (九) 查询持久化--记录规则

prometheus使用 (十) 服务发现

prometheus使用 (十一) alertmanager集群部署

prometheus使用 (十二) 简单告警配置

prometheus使用 (十四) 告警模板配置

小技巧 (十) ansible批量抓取多个节点上的不同文件

prometheus使用 (十三) QQ邮件告警

小技巧 (十一) ansible普通用户执行

prometheus使用 (十五) alertmanager特性--分组

删除5天前的文件

prometheus使用 (十六) alertmanager特性--告警抑制

ansible使用时遇到的问题

docker小技巧（一）使用iptables 映射docker容器端口

小技巧 (十二) 使用yum获取软件包

prometheus使用 (十七) alertmanager特性--静默

prometheus使用 (十八) pushgateway自定义指标收集

prometheus使用 (十九) 标签重写

计算支付宝基础算率

查询目录下所有子目录的路径

harbor错误

configmap更新报错记录

helm 工具命令补全

小技巧（十四） windows批量清除空目录

记录coredns外部无法解析的情况

修复XFS文件系统的过程

helm 异常

pod异常

欢迎