乐胖代购免代理版

elk

logstash

filebeat

日志分析

数据

原创 2022-03-02 16:11:59 367 阅读 1点赞 1收藏

如何进行Logstash logstash-input-jdbc插件的离线安装

我们单位的服务器位于隔离区，不允许链接互联网，因此整理了在ELK集群上离线安装Logstash的jdbc input插件的方法，供大家参考。总体思路是需要一台中转的机器，这台机器需要能够访问互联网，先在这台机器中将需要安装的插件及依赖包制作成离线安装包，然后再拷贝到生产机器上安装。打包打包前的

logstash

离线安装插件

Offline

参考资料

依赖包

原创 2022-03-02 16:07:43 625 阅读

使用Logstash创建ES映射模版并进行数据默认的动态映射规则

本文配置为 ELK 即（Elasticsearch、Logstash、Kibana）5.5.1。 Elasticsearch 能够自动检测字段的类型并进行映射

elk

动态映射

mapping

elasticsearch

字段

原创 2022-03-02 16:07:00 572 阅读

Curl操作Elasticsearch的常用方法

Elasticsearch对于文档操作，提供了以下几种API，本文就说明如何使用curl方式来调用这些API。 API种类单文档操作API 1、 Index API 索引文档为文档创建索引返回结果上面的例子，如果索引不存在，则会自动创建索引及动态映射关系。如果想要关掉这两个特性，可以修改节点

logstash

elasticsearch

curl

twitter

json

原创 2022-03-02 16:03:11 118 阅读

Prometheus 初体验

本文环境 Redhat Linux 6.7, Prometheus 2.2.1，node_exporter 1.5.2 介绍 Prometheus 是20

Prometheus

linux

运算符

数据

原创 2022-03-02 15:52:06 82 阅读

Jenkins 快速搭建

Jenkins 介绍 Jenkins 作为持续集成的重要工具，在DevOps整个工具链中有重要的地位。

jenkins

docker

java

tomcat

原创 2022-03-02 15:48:40 139 阅读

SRE学习笔记：分布式共识系统、Paxos协议

最近阅读了《SRE Google运维解密》的第23章，有一些感触，记录一下。日常工作中，我们经常需要一些服务分布式的运行。跨区域如跨城、跨洲部署运行分布式系统往往是容易的，但是如何保证各系统间状态的一致是困难的。如何保证服务的高可靠、高可用，就是服务提供的数据是准确的，关键在于一些状态的传递，这个

paxos

rsm

分布式共识

分布式系统

数据

原创 2022-03-02 15:45:08 89 阅读

Minikube体验

本文的环境如下：操作系统： Mac OSX EI Caption Docker：Docker version 18.03.1 ce, build 9ee9f40 Minikube：minikube version: v0.27.0 Kubernetes: v1.10.0 Minikube 介绍 M

minikube

kubernetes

docker

node

负载均衡

原创 2022-03-02 15:40:38 107 阅读

Docker 概述

Docker 是一个应用程序开发、部署、运行的平台，使用 go 语言开发。相较于传统的主机虚拟化，Docker 提供了轻量级的应用隔离方案，并且为我们提供了应用程序快速扩容、缩容的能力。 Docker Engine 先来看一下 Docker Engine 的结构，它是一个Client Server应

docker

docker daemon

container

image

volumes

原创 2022-03-02 15:40:12 42 阅读

创建自己的Docker基础镜像

本文讲解如何在本地构建一个基础的Docker Python环境镜像，并扩展这个基础镜像构建Python运行环境，之后再构建自己的Python应用。创建基础镜像 Docker 提供了 "两种方法" 来创建基础镜像，一种是通过引入 tar 包的形式，另外一种是通过一个空白的镜像来一步一步构建，本文使用

docker

alpine

image

build

linux

原创 2022-03-02 15:38:59 675 阅读

Kubernetes 存储系统 Storage 介绍

本文环境为Kubernetes V1.11，操作系统版本为 CentOs 7.3，Kubernetes集群安装可以参考

kubernetes

storage

volume

原创 2022-03-02 15:35:07 313 阅读

Kubernetes基础

Kubernetes是什么 Kubernetes是当今最流行的开源容器管理平台

kubernetes

Concept

master

node

pod

原创 2022-03-02 15:32:36 53 阅读

在Redhat 7.3中采用离线方式安装Docker

本文环境 Redhat Linux 7.3。Docker 18. 写在前面 Docker CE默认是不支持Redhat的，如果你想在Redhat安装，可以使用静态二进制包。这是我多次尝试RPM后得出的结论。使用这种方式安装，不支持32位的操作系统。这种方式仅仅是为了在测试环境能够运行Docker，真

redhat

linux

docker

生产环境

原创 2022-03-02 15:29:54 1230 阅读

Docker存出载入镜像

镜像的存出和载入如果你的生产环境不能连通互联网，而你又希望从互联网上获取镜像。你就需要借助 docker save命令

docker

save

load

image

elasticsearch

原创 2022-03-02 15:28:39 111 阅读

Kubernetes基础：查看状态、管理服务

为了方便大家系统的学习 Kubernetes ，我整理了一份 Kubernetes 学习系列文章

kubernetes

pod

node

service

nodeport

原创 2022-03-02 15:27:26 611 阅读

离线环境下使用二进制方式安装配置Kubernetes集群

本文环境 Redhat Linux 7.3，操作系统采用的最小安装方式。

kubernetes离线

集群

安装

二进制

docker

原创 2022-03-02 15:26:54 116 阅读

kubeadm安装kubernetes V1.11.1 集群

之前测试了 "离线环境下使用二进制方法安装配置Kubernetes集群" 的方法，安装的过程中听说 kubeadm 安装配置集群更加方便，因此试着折腾了一下。安装过程中，也有一些坑，相对来说操作上要比二进制方便一点，毕竟不用手工创建那么多的配置文件，但是对于了解Kubernetes的运作方式，可能不

kubeadm

kubernetes

flannel

docker

bootstrap

原创 2022-03-02 15:21:14 231 阅读

使用kubectl创建部署

本文使用自己利用VirtubalBox搭建的集群环境，暂时只有一个Master、一个Node。如果想了解集群的搭建，可以参考我的文章 "离线环境安装Kubernetes集群" 以及 "使用kubeadm安装kubernetes V1.11.1 集群" 。 0. 目标在命令行下使用 kubectl

kubernetes

kubectl

deployment

node

pod

原创 2022-03-02 15:15:21 85 阅读

Kubernetes中StatefulSet介绍

StatefulSet 是Kubernetes1.9版本中稳定的特性，本文使用的环境为 Kubernetes 1.11。如何搭建环境可以参考 "kubeadm安装kubernetes V1.11.1 集群" 0. 介绍使用Kubernetes来调度无状态的应用非常简单，那Kubernetes如何来

kubernetes

statefulset

nginx

主机名

分布式系统

原创 2022-03-02 15:14:10 93 阅读

Docker实现容器具有固定IP

Docker的网络类型 Docker安装后，默认会创建三种网络 Docker启动的时候，可

docker

固定IP

elasticsearch

重启

原创 2022-03-01 18:49:24 941 阅读

获取Kafka每个分区最新Offset的几种方法

[TOC] 脚本方法和Java程序比起来，运行得有点慢。

kafka

offset

latest

apache

java

原创 2022-03-01 18:48:39 414 阅读

Flink101-快速示例

验证本文需要具备Docker及Docker-composer

flink

docker

word count

composer

原创 2022-03-01 18:48:12 150 阅读

Spark学习笔记01-基础

本文基于 Spark 2.4.1 进行演示，相关代码可以在我的Githu

spark

hadoop

资源管理

转载 2022-03-01 18:47:31 114 阅读

docker-compose 使用介绍

简介 Docker-Compose项目是Docker官方的开源项目，负责实现对Docker容器

docker

负载均衡

重启

原创 2022-03-01 18:43:24 84 阅读

Elasticsearch 日志配置详解

Elasticsearch 产品自发布以来，随着功能不断增强，其在各种互联网产品、企业文，我们能够了解以下知识点： Elastics

elasticsearch

json

sed

原创 2022-03-01 18:42:03 1019 阅读

编写 Dockerfile 生成自定义镜像

一般情况下我们可以从公共渠道诸如 DockerHub 获取镜像上获取镜像，但是在实际生产过程中，往往需要定制化的镜像，例如修改一些配置文件，增加一些特殊的命令或软件等需求，这时就需要通过编写 Dockerfile 来生成自定义的镜像文件。 Dockerfile介绍 Dockerfile 是一个文本格

docker

python

开发环境

原创 2022-02-24 15:16:26 114 阅读

编写 Dockerfile 生成自定义镜像

一般情况下我们可以从公共渠道诸如 DockerHub 获取镜像上获取镜像，但是在实际生产过程中，往往需要定制化的镜像，例如修改一些配置文件，增加一些特殊的命令或软件等需求，这时就需要通过编写 Dockerfile 来生成自定义的镜像文件。 Dockerfile介绍 Dockerfile 是一个文本格

docker

python

开发环境

原创 2022-02-24 15:12:09 116 阅读

Kubernetes 学习系列文章

本文将我编写的一些 Kubernetes 学习文章整理在一起，方便大家索引。 Kubernetes 基础概念 Kubernetes基础：Service Kubernetes 基础：编排调度的那些 Controllers Kubernetes基础：Pod的详细介绍 Kubernetes基础：查看状

docker

离线

日志管理

原创 2022-02-24 15:11:05 397 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

wx61eaae213a986的博客

欢迎

Filebeat+Logstash+ElasticSearch+Kibana搭建Apache访问日志解析平台

如何进行Logstash logstash-input-jdbc插件的离线安装

使用Logstash创建ES映射模版并进行数据默认的动态映射规则

Curl操作Elasticsearch的常用方法

Prometheus 初体验

Jenkins 快速搭建

SRE学习笔记：分布式共识系统、Paxos协议

Minikube体验

Docker 概述

创建自己的Docker基础镜像

Kubernetes 存储系统 Storage 介绍

Kubernetes基础

在Redhat 7.3中采用离线方式安装Docker

Docker存出载入镜像

Kubernetes基础：查看状态、管理服务

离线环境下使用二进制方式安装配置Kubernetes集群

kubeadm安装kubernetes V1.11.1 集群

使用kubectl创建部署

Kubernetes中StatefulSet介绍

Docker实现容器具有固定IP

获取Kafka每个分区最新Offset的几种方法

Flink101-快速示例

Spark学习笔记01-基础

docker-compose 使用介绍

Elasticsearch 日志配置详解

编写 Dockerfile 生成自定义镜像

编写 Dockerfile 生成自定义镜像

Kubernetes 学习系列文章