品鉴初心的博客_python,Mysql,自动化运维,Docker,kubernetes,Hadoop,云服务,云平台,Linux系统,Windows系统,安全_51CTO博客
51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频 免费课程 课程排行 直播课 软考学堂
全部课程 厂商认证 IT技术 25年5月软考 PMP项目管理 免费题库
在线学习
文章 资源 问答 课堂 专栏 直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库
zadig：一次更新DNS引发的惨案

zadig：一次更新DNS引发的惨案

系统信息 ## 操作系统 CentOS Linux release 7.9.2009 (Core) ## k8s 版本 v1.22.10 ## zadig 版本 v1.15.0 故障背景 最近zadig发布时，时不时出现连接我们内网服务gitlab和harbor超时timeout问题，看了下 k8s etcd 的监控信息，确实延时挺高（200~500ms），正常延时应该在10ms左右。 机房服务

DNS
k8s
zadig
流水发布
原创 精选 2023-12-11 14:30:22 333 阅读 yyds干货盘点
Linux报错watchdog: Bug: soft lockup – CPU软锁问题

Linux报错watchdog: Bug: soft lockup – CPU软锁问题

故障背景 大数据集群中新增三台虚拟机（配置与老一批服务器配置一样），运行相同的服务，老一批虚拟机运行正常，新加的这三台运行异常，报错内容：watchdog: Bug: soft lockup – CPU……” （CPU 软锁）。 故障排查 一开始以为是虚拟机模板的问题，新老服务器不是使用同一个模板部署，询问IT后得知，虚拟机模板一样。谷歌下发现有类似的问题，详见解决 Linux 运行时报错 “wa

linux系统
CPU软锁
cpu
原创 2023-12-04 14:38:36 8757 阅读 yyds干货盘点
k8s更新证书后Jenkins的配置变更

k8s更新证书后Jenkins的配置变更

k8s 证书更新 如果底层容器运行时使用的是Docker，可参考kubesphere证书更新。如果容器运行时是Containerd,也可参考如上文章，区别是重启容器的命名。如是多节点master，也可以依次重启各个master节点。 配置 k8s 集群对接 主要更新三个内容：连接k8s的凭据、k8s config、pod模板基础镜像（其实更新的是config）。 新建 k8s 凭据 登录 Je

Jenkins
docker
k8s
原创 2023-11-27 11:15:17 320 阅读 私藏项目实操分享
loki日志http请求过大的报错

loki日志http请求过大的报错

错误现象 日志平台使用的是Loki + Promtail组合，这边有个服务日志量很大。当我使用Grafana请求这个 pod 的服务日志时，grafana显示timeout或 504 报错。 故障排查 （1）调整Grafana的超时设置 具体设置可参考Grafana从Loki查询大量日志时超时问题，我也尝试通过调整grafna --> 数据源 --> Loki中HTTP栏目中的time

Loki
gRPC
原创 2023-11-14 17:22:10 892 阅读 私藏项目实操分享
使用Supervisor监控和启动MongoDB集群服务

使用Supervisor监控和启动MongoDB集群服务

说明 关于Supervisor网上资料很多，大家可以去看下，这里重点是使用Supervisor进行监控和启动MongoDB集群服务。 安装 Supervisor （1）添加 yum 源 # cat /etc/yum.repos.d/epel.repo [epel] name=Extra Packages for Enterprise Linux 7 - $basearch # It is muc

mongodb
supervisor
原创 2023-11-06 15:52:45 246 阅读 私藏项目实操分享
kubesphere证书更新

kubesphere证书更新

版本信息 kubesphere 3.3.0 k8s v1.22.10 证书更新流程 （1）查看证书到期时间 kubeadm certs check-expiration 打印出的信息如下： [check-expiration] Reading configuration from the cluster... [check-expiration] FYI: You can

docker
k8s
kubesphere
原创 2023-10-12 11:23:23 667 阅读 私藏项目实操分享
RocketMQ集群部署

RocketMQ集群部署

部署架构 说明： （1）Producer：生产者 （2）Consumer：消费者 （3）NameServer：RockerMQ的注册中心，多个实例组成集群，但相互独立，没有信息交换。每个Broker都向所有NameServer实例注册。 （4）Broker：负责存储消息、转发消息。 部署模式 RocketMQ作为消息中间件，其主要功能为消息的Publish/Subscribe。而Broker担任

rocketmq
rocketmq集群
原创 2023-09-07 15:26:44 276 阅读 私藏项目实操分享
将Arthas工具封入应用服务镜像中

将Arthas工具封入应用服务镜像中

Arthas基础镜像 ## cat Dockerfile FROM openjdk:11-jdk MAINTAINER tengfei <tengfei.wu@test.com> # copy arthas RUN wget -P /opt/arthas https://arthas.aliyun.com/arthas-boot.jar # copy arthas lib ADD ./

docker
java
arthas
k8s
原创 2023-08-01 14:59:03 214 阅读 私藏项目实操分享
Dozzle 获取远程主机容器日志

Dozzle 获取远程主机容器日志

Dozzle 项目 Dozzle是一个小巧且轻量级的应用程序，具有基于Web的界面，用于监视Docker日志。它不会存储任何日志文件，仅用于实时监视容器日志。 项目地址：https://github.com/amir20/dozzle 生成证书 1、生成 CA（根证书）私钥和自签名证书： openssl req -x509 -nodes -newkey rsa:4096 -keyout ca.

签名证书
Docker
Dozzle
原创 2023-07-03 17:19:17 666 阅读 私藏项目实操分享
Docker Remote API配置

Docker Remote API配置

Docker 常见端口 端口 作用 2375 未加密的docker socket,远程root无密码访问主机 2376 tls加密套接字,很可能这是您的CI服务器4243端口作为https 443端口的修改 2377 群集模式套接字,适用于群集管理器,不适用于docker客户端 5000 docker注册服务 4789/7946 覆盖网络 Docker Remo

Docker
配置文件
docker api
原创 2023-07-03 16:50:48 317 阅读 私藏项目实操分享
k8s上部署 ElasticSearch Exporter 并接入看板和告警

k8s上部署 ElasticSearch Exporter 并接入看板和告警

说明 在使用 ElasticSearch 时，为了对集群及索引状态等运行状态进行监控，你可以使用 Prometheus 监控服务提供的基于 Exporter 的方式。这种方式可以轻松监控 ElasticSearch 的运行状态，并使用内置的 Grafana 监控大盘，使监控变得更加易于管理和可视化。 为了使部署和管理更加高效，我选择将其直接部署在 Kubernetes 上。当然，如果实际情况需要，

Elastic
elasticsearch
k8s
原创 精选 2023-04-24 17:24:08 2416 阅读 yyds干货盘点
使用parted分区和文件系统扩展及问题

使用parted分区和文件系统扩展及问题

操作步骤 # 查看当前磁盘信息 lsblk -f 对当前超过2T磁盘使用parted创建lvm格式分区： parted /dev/sda GNU Parted 3.1 Using /dev/sda Welcome to GNU Parted! Type 'help' to view a list of commands. (parted) print

System
centos
VMware
parted
原创 2023-04-19 17:26:15 412 阅读 私藏项目实操分享
Centos7.9部署MySQL8+keepalived双主热备高可用

Centos7.9部署MySQL8+keepalived双主热备高可用

前言 本文借鉴和参考：https://blog.51cto.com/u_15445837/6081230，如有侵权，请与我联系，感谢~ 架构图 说明： 如上图，VIP地址是10.0.x.126，如果主机10.0.x.125宕机，会自动切换到备机​​10.0.x.23，由于是双主，数据可以进行同步恢复。 部署流程 部署大致流程如下： 在10.0.x.125服务器上部署docker、master1

mysql
sql
keepalived
mysql8
mysql监控
原创 精选 2023-04-14 15:32:11 598 阅读 私藏项目实操分享
Centos7.9仅安装mysql8客户端工具

Centos7.9仅安装mysql8客户端工具

说明 这里的方式是通过MYSQL官网下载包进行安装 Mysql 客户端，直接使用yum的安装方式没试过，安装命令yum install mysql-devel。 mysql客户端安装 需要在官网上下载4个包，这里以8.0.25版本为例，要下载的包如下： mysql-community-common mysql-community-client-plugins mysql-community-lib

mysql
客户端
mysql8
mysql-community-clie
原创 2023-04-14 11:47:39 1482 阅读 yyds干货盘点
k8s部署企业版emqx集群

k8s部署企业版emqx集群

说明 测试环境我们可能使用压缩包或docker方式以单节点的形式启动服务，但在生产环境需要一个更加简单和稳定的方式去部署我们的EMQX企业版服务。 部署架构 EMQX 集群可作为物联网接入服务（IoT Hub）部署，目前 EMQ 在青云、阿里云、AWS 等云服务提供商上均提供开箱即用的免费软件镜像，对于特殊硬件平台和系统版本如树莓派、Linux ARM，可使用源码编译安装。 典型部署架构： LB

nginx
TCP
SSL
emqx
k8s
原创 2023-04-03 16:24:43 1444 阅读 私藏项目实操分享
k8s版portainer管理docker平台

k8s版portainer管理docker平台

说明 Portainer是用于管理Dcoker应用/服务的web可视化工具。支持多个服务器节点。 安装 portainer server 网上有很多使用 docker 部署 portainer 的文档，需要的可以自行搜索参考，本文重点说下 k8s 上部署 portainer server。 提前创建一个持久卷，我这里是portainer-data-pvc。 这里提供一个 k8s deploymen

docker
Docker
可视化工具
portainer
原创 精选 2023-03-23 17:42:48 2828 阅读 私藏项目实操分享
k8s版MongoShake数据迁移工具

k8s版MongoShake数据迁移工具

说明 我们原有的 MongoDB 副本集集群部署在 k8s 上，后因业务需求，在 k8s 集群外使用三台虚拟机组建了一套相同架构的 MongoDB 副本集集群，现想将在k8s集群上mongoDB数据迁移到新的MongoDB集群里。 集群信息： mongodb-1：10.x.x.56 mongodb-2：10.x.x.57 mongodb-3：10.x.x.58 功能 mongos:2

mongodb
python
数据迁移
mongoshake
原创 精选 2023-03-22 13:28:47 658 阅读
Mysql8.0+ 调整连接数与连接超时时间

Mysql8.0+ 调整连接数与连接超时时间

说明 核心点： 1、默认超时时间是28800秒，即8小时。 2、最大连接数默认是151个(上限为1000)。 3、当查询数量大于其最大连接数且没有超过默认时间时，后面的请求将无法响应，即会返回Too many connections错误信息，此时查询数据库show full processlist;可以发现大量的连接处于sleep状态。 4、临时优化方案： set GLOBAL interac

mysql
sql
持久化
数据库连接数
数据库连接超时时间
原创 精选 2023-03-16 11:17:34 5914 阅读 1点赞 1收藏 私藏项目实操分享
如何解决kswapd0高CPU占用问题

如何解决kswapd0高CPU占用问题

故障现象 公司某公有云上一台临时测试主机突然无法正常登录，从控制台查看监控图像发现已经无法正常显示即时信息，将监控时间范围调整7天内，发现如下图信息： 查看系统进程信息： 故障原因 kswapd0，管理虚拟内存并且可能由于过于频繁地将进程移动到SWAP而出现问题，导致 cpu 峰值和系统性能下降。 kswapd0 的高 CPU 使用率表示内存不足并且正在进行内存交换。 系统检查 Swappi

内存不足
python
swappiness
原创 精选 2023-03-03 15:45:34 10000+阅读 1点赞 yyds干货盘点
使用Alpine Linux做基础镜像备份mysql8.0+数据库

使用Alpine Linux做基础镜像备份mysql8.0+数据库

说明本篇文章仅是基于k8scronjob备份mysql8.0+数据库，使用AlpineLinux作为基础镜像时遇到的问题做下简单的排坑，没有涉及到具体的部署细节，后面有时间再补上。镜像打包python最新镜像dockerbuildtregistry.cnshanghai.aliyuncs.com/test/mysqlbackup:202302211550.定时执行基于k8scrontabjob运行

mysql
python
linux
k8s
cronjob
原创 推荐 2023-02-22 11:11:49 1255 阅读 yyds干货盘点
mysql主从同步异常修复

mysql主从同步异常修复

说明mysql集群部署在k8s上，架构是“一主两从”，机房突然断电，导致mysql集群启动之后，发生主从同步异常。主库上查看binlog信息：sqlmysqlshowmasterstatus\G;1.rowFile:mysql0bin.000365Position:499726305Binlog_Do_DB:Binlog_Ignore_DB:Executed_Gtid_Set:1rowinset(

mysql
主从同步
原创 精选 2023-02-17 17:06:41 1211 阅读 私藏项目实操分享
基于consul对接prometheus监控docker容器资源

基于consul对接prometheus监控docker容器资源

部署cAdvisor在被监控的Docker节点机器上启动cAdvisor服务，启动方式使用Docker启动:pythondockerrun\volume=/:/rootfs:ro\volume=/var/run:/var/run:rw\volume=/sys:/sys:ro\volume=/var/lib/docker/:/var/lib/docker:ro\publish=8080:8080\d

docker
prometheus
consul
consulmanager
alertmanager
原创 精选 2023-02-08 17:15:15 1016 阅读 私藏项目实操分享
使用一个 mysqld exporter 监控所有的MySQL实例

使用一个 mysqld exporter 监控所有的MySQL实例

说明之前文章有聊过使用Prometheus监控自建Mysql(https://blog.51cto.com/wutengfei/5201826)，感兴趣的同学可以看下。本次我们简单聊下结合consulmanager使用一个mysqldexporter监控所有的MySQL实例的具体实现方法。主要步骤：数据库授权部署mysqlexporter对接Prometheus监控对接consulmanager服

mysql
prometheus
consul
grafana
consulmanager
原创 精选 2023-02-01 10:58:26 3801 阅读 1点赞 1收藏 私藏项目实操分享
部署一个redis exporter监控所有的Redis实例

部署一个redis exporter监控所有的Redis实例

说明之前有写过使用k8s部署redisexporter监控所有的Redis实例(https://blog.51cto.com/wutengfei/5997105)，简单分析了关于redis的监控和告警部署与配置。本文将结合ConsulManager部署一个redisexporter监控所有的Redis实例。部署redisexporter这里提供两种部署方式，我这里选择使用k8s部署方式，大家按需选

redis
consul
consulmanager
prometheus
grafana
原创 精选 2023-01-30 14:27:09 5322 阅读 1点赞 私藏项目实操分享
使用k8s部署redis exporter监控所有的Redis实例

使用k8s部署redis exporter监控所有的Redis实例

说明针对于redis实例的监控主要分为两类：自建redis实例云端托管的redis本文主要简单说明下使用redisexport+Prometheus+Consul+Grafana+Prometheusalert整套流程对自建redis监控指标收集，看板展示和信息告警的基本流程。部署redisexport本次部署使用k8s，yaml部署文件如下：yamlcatredisexporterselfbui

redis
redis-exporter
k8s
prometheus
consul
原创 精选 2023-01-09 13:06:18 4363 阅读 1点赞 1评论 私藏项目实操分享

Copyright © 2005-2025 51CTO.COM 版权所有 京ICP证060544号

关于我们
官方博客 全部文章 热门标签 班级博客
了解我们 网站地图 意见反馈
友情链接
鸿蒙开发者社区 51CTO学堂
51CTO 软考资讯