genuinecx的博客_Java,软考,互联网运营,项目管理,企业管理,Windows server,电子商务,年度总结,软件管理,IT技术-Java原创(2)_51CTO博客
51CTO首页
AI.x社区
博客
学堂
精品班
软考社区
免费课
企业培训
鸿蒙开发者社区
WOT技术大会
IT证书
公众号矩阵
移动端
短视频 免费课程 课程排行 直播课 软考学堂
全部课程 厂商认证 IT技术 25年5月软考 PMP项目管理 免费题库
在线学习
文章 资源 问答 课堂 专栏 直播
51CTO
鸿蒙开发者社区
51CTO技术栈
51CTO官微
51CTO学堂
51CTO博客
CTO训练营
鸿蒙开发者社区订阅号
51CTO软考
51CTO学堂APP
51CTO学堂企业版APP
鸿蒙开发者社区视频号
51CTO软考题库

了解一下Logstash常用配置

Logstash管道可以配置一个或多个输入插件、过滤器插件和输出插件。其中，输入插件和输出插件是必选的，过滤器插件是可选的。下图是Logstash常见的使用场景。上一节的例子中我们使用标准的输入和输出插件做了简单的示例。接下来我们演示一些复杂的场景。如下图所示是Logstash的标准管道结构，我们通过一些高级配置来完成Apache日志的过滤。# The # character at the beg

Logstash
ELK
原创 2016-07-07 16:59:28 1483 阅读

了解一下Logstash

　　Logstash 是一个应用程序日志、事件的传输、处理、管理和搜索的平台。你可以用它来统一对应用程序日志进行收集管理，提供 Web 接口用于查询和统计。　　Logstash配置要求　　Logstash支持Java 1.7版本以上。   　　启动Logstash[root@Server01 bin]# ./logstash&n

Logstash
ELK
原创 2016-07-01 11:27:56 1092 阅读

Elasticsearch常用操作API

1. 查询所有的索引[root@Server01 cx]# curl '10.0.0.5:9200/_cat/indices?v' health status index    pri rep docs.count docs.deleted store.size&nbs

Elasticsearch
ELK
原创 2016-06-28 14:35:03 3128 阅读

探索Elasticsearch集群API

　　Elasticsearch提供了一个非常全面和强大的REST API,您可以使用与您的集群进行交互。为数不多的可以用API的事情如下:检查您的集群、节点和索引健康状态和统计数据管理集群、节点和索引数据和元数据执行CRUD(创建、读取、更新和删除)索引和搜索操作执行高级搜索操作,比如分页、排序、过滤、脚本、聚合,和许多其他人1. 可以使用 _cat API查看ela

Elasticsearch
ELK
原创 精选 2016-06-26 15:16:31 1735 阅读

Elasticsearch安装配置

1. 从Elastic官网下载最新版本的Elasticsearch，目前最新版本为V2.3.3。2. 解压tar zxvf elasticsearch-2.3.2.tar.gz3. 切换到Elasticsearch的bin目录下，启动服务。 ./elasticsearch Exception in thread "main" j

ELK
Elastics
earch
原创 精选 2016-06-24 17:04:46 1263 阅读

我所认识的ELK Stack

    听说ELK Stack最近很火，于是我抱着试试看的态度去市场了解了一番，发现现在很多公司都在使用这个东西处理日志，而且成为实时日志处理领域的第一选择，于是我就去官网认真的学习了一番。    ELK Stack这个东西是 Elasticsearch、Logstash、Kibana 三个开源软件的组合，在实时数据检索和分析场合通常都是配合使用，而且这三个

Elasticsearch
ELK
原创 2016-06-17 10:10:14 1318 阅读

Kafka消费者Consumer常用配置

bootstrap.servers：broker服务器集群列表，格式为 host1:port1, host2:port2key.deserializer：定义序列化的接口value.deserializer：实现序列化接口的类group.id：消费者分组Idconsumer.timeout.ms：消费者连接超时时间，默认为5000毫秒zookeeper.connect：Zookeeper

消费者
消息队列
Kafka
原创 2016-04-27 10:08:00 8436 阅读

详解Kafka生产者Producer配置

基本配置metadata.broker.list：broker服务器集群列表，格式为 host1:port1, host2:port2 ...producer.type：消息发送类型同步还是异步，默认为同步compression.codec：消息的压缩格式，默认为none不压缩，也可以为gzip, snappy, lz4serializer.class：消息

消息队列
Kafka
Producer
原创 2016-04-26 14:57:50 10000+阅读

Kafka Broker常用配置详解

    broker的配置文件位于kafka的config/server.properties文件。    Broker基本配置    broker.id：代理Id，必须是唯一的整数。可以是0，1，2，3这样的自定义编号，也可以是IP地址的最后一位，如23，24，25，建议使用后面的编码方式。    auto.lead

Broker
消息队列
Kafka
原创 2016-04-17 12:46:52 8177 阅读

Kafka常用操作

　　添加和删除主题（Topic）　　你可能使用过手动创建主题或发送消息时自动创建主题这样的操作。但是你并不了解其中的详情。Kafka中的主题可以在主题配置中配置为自动创建的。./kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 2 --part

生产者
消息队列
Kafka
原创 2016-04-15 13:26:58 4097 阅读

Hello, Kafka World

Producer.javapackage com.favccxx.isoft.favkafka; import java.util.Properties; import org.apache.kafka.clients.producer.KafkaProducer; import org.apache.kafka.clients.producer.Produ

生产者
消息队列
Kafka
原创 2016-04-13 17:40:18 2995 阅读

搭建Kafka集群

1. 启动Zookeeper服务器 ./zookeeper-server-start.sh /opt/cx/kafka_2.11-0.9.0.1/config/zookeeper.properties2. 修改broker-1，broker-2配置broker.id=1 listeners=PLAINTEXT://:9093  # The port

消息队列
Zookeeper
Kafka
原创 2016-04-12 16:30:46 1986 阅读

Linux下安装并（单节点）配置启动Kafka

1. 从Kafka官网下载最新的Kafka，目前最新版本为0.9.0.12. 下载完毕后，上传到Linux服务器，并解压 tar -xzf kafka_2.11-0.9.0.1.tgz3. 修改Zookeeper服务器配置，并启动cd kafka_2.11-0.9.0.1 vi config/zookeeper.properties 

消息队列
Zookeeper
Kafka
原创 2016-04-08 11:21:58 10000+阅读

带你认识一下Kafka

　　Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者规模的网站中的所有动作流数据。也可以把它当作是分布式提交日志的发布-订阅消息，事实上Kafka官网上也是这么说明的。　　关于Kafk你必须知道的几个关键术语　　topics：Kafka接收的各种各样的消息　　producers：发送消息到Kafka　　consumers：从Kafka接收消息的订阅者　　broker：一个或多个服

消息队列
Zookeeper
Kafka
原创 2016-04-07 11:17:25 1534 阅读 1评论

VisualVM使用Jstatd远程监控服务器

　　jstat可以实时显示本地或远程JVM进程中类装载、内存、垃圾收集、JIT编译等数据。如果要显示远程JVM信息，需要远程主机开启RMI支持，详情见下文。　　1.  创建jstatd服务器授权文件jstatd.all.policy，代码如下，然后将改文件放到Java/bin目录下。grant codebase "file:${java.home}/../lib/to

VisualVM
原创 精选 2016-03-25 17:47:54 3394 阅读

基于盐+Sha算法的安全密码保护机制

　　密码通过加盐后，可以增加密码的复杂度，即便最简单的密码，在加盐后，也能变成复杂的字符串，这大大提高了密码破解的难度。但是如果将盐硬编码在程序中或随机一次生成的，每个密码进行hash使用相同的盐会降低系统的防御力，因为相同密码的hash两次后的结果也是一样的。所以比较正确的做法是每次创建用户或修改密码都使用一个新的随机盐。　　很多用户可能想到了将用户名作为盐的方案，虽然对于每一个用户来说用户名可

盐
Hash
sha2
原创 精选 2016-01-26 16:11:12 5485 阅读 1点赞 1评论

Oracle高水位High Water Mark(HWM)简介

　　1.什么是高水位　　高水位是Oracle中使用和未使用空间中的边界线，也可以理解为数据文间和非数据文间的分界线，但是这里的数据文件指代的是存储过数据的数据文件，而非仅仅是数据表中有数据的数据文件。　　2.高水位对于检索的影响　　假设我们有个表有2百万行数据存储在几个区中，假如我们删除一百万条数据。尽管数据区中的数据没有了，但是Oracle中占用的区的数据空间仍然不变，与原来二百万条数据占用的数

Oracle
High
高水位
原创 2016-01-07 14:51:23 2211 阅读 1点赞

详解MySQL查询缓存

　　查询缓存是指存储使用SELECT语法查询到的返回到客户端的文本。当相同的请求再次发生时，会从查询缓存中获取数据，而非再执行一遍查询。查询缓存是共享Session会话的，所以一个客户端的请求可能与另一个客户端的请求得到相同的结果。　　当服务器频繁收到相同的请求而数据库中的表数据变化频率又不高，查询缓存是非常有用的，它可以大大提高应用程序的访问效率。很多Web服务器利用这一原理基于数据库的内容动态

MySQL
查询缓存
数据库优化
原创 精选 2015-12-31 14:45:20 1252 阅读

慢查询日志分析工具mysqldumpslow

　　mysqldumpslow是mysql自带的一种慢查询日志分析工具，顾名思义，就是查询那些出那些查询慢的SQL语句，由此分析出SQL查询效率慢的原因。　　通常来说，mysqldumpslow分组查询的结果是相似的，它在展示统计结果时，可以将数字和字符串分别抽象成“N”和“S”。当然也可以用-a 和 -n选项可以用来修改这些抽象的行为。　　mysqldumpslow查询命令　　mysqldump

MySQL
数据库
慢查询
慢查询日志
MySQL日志
原创 精选 2015-12-30 16:41:05 3135 阅读

MySQL慢查询日志

　　mysql本身支持慢查询日志，可以配置SQL查询超过特定时间的查询记录到日志中。这在优化SQL查询中是非常有效的工具，能够帮助我们快速定位发生问题的SQL。　　慢查询日志常用的变量　　long_query_time ： 最小值为0，默认为10毫秒，仅记录超过查询时间的SQL，最小粒度为毫秒。　　min_examined_row_limit : 执行查询时扫描过的行数。　　slow_query_

MySQL
数据库
慢查询
慢查询日志
MySQL日志
原创 精选 2015-12-29 11:42:10 2465 阅读 1点赞

HTML 5实现的手机摇一摇

  自从HTML 5的DeviceOrientation被开发出来，很多开发者开始研究其特性，并对此开发出了摇一摇，计步器等应用。小编近日闲着无聊，也开发出了一个摇一摇网页应用，感兴趣的小伙伴可亲身体验一下。  扫码访问  效果图  技术解析  （1） DeviceOrientation  DeviceOrientation是H

HTML5
摇一摇
爱摇呀
DeviceOrientation
原创 精选 2015-11-26 19:52:02 2612 阅读

RabbitMQ实例教程：RPC远程调用消息队列

　　在工作队列一章中，我们学会了如何使用工作队列来处理多个工作进程间分发任务，但如果我们想要运行远程计算机上的函数来获得结果呢？这就是本章要处理的问题RPC。　　本节我们会使用RabbitMQ构建一个RPC系统：一个客户端和一个可扩展的RPC服务器。因为我们没有任何耗时的任务值得分发下去，我们构建一个虚拟的服务来返回斐波纳契数列。　　客户端接口　　我们创建一个客户端类来说明如何使用RPC服务，暴露

MQ
消息队列
RabbitMQ
原创 精选 2015-10-22 19:45:18 3814 阅读 1点赞 1评论

RabbitMQ实例教程：主题交换机

　　前面的例子中，尽管我们使用了direct路由代替fanout路由解决了盲目广播的问题，但direct路由也有它的缺陷，他不能基于多个标准做路由转发。　　在上面的日志系统中，如果不仅想基于日志等级做订阅，也想根据日志的发生源做订阅该怎么处理呢？这时候你可能想到了unix系统工具中的syslog服务，它不仅基于日志等级（info/warn/crit...）进行路由转发，也会根据操作（auth/cr

MQ
消息队列
RabbitMQ
原创 推荐 2015-10-15 01:34:07 3060 阅读

RabbitMQ实例教程：路由选择

　　在前面的例子中，我们构建了一个简单的日志系统来日志消息通过广播传送到多个接受者。本文将介绍如何订阅消息的子集。比如，我们能够将关键的错误信息写到日志文件中，同时也能够在控制台打印所有的日志消息。　　消息绑定（Bindings）　　在前面的例子中，我们使用下面的代码方式再次绑定。channel.queueBind(queueName, EXCHANGE_NAME, "");　

MQ
消息队列
RabbitMQ
原创 精选 2015-10-13 02:38:46 3551 阅读 1点赞

RabbitMQ实例教程：发布/订阅者消息队列

　　消息交换机（Exchange）　　RabbitMQ消息模型的核心理念是生产者永远不会直接发送任何消息给队列，一般的情况生产者甚至不知道消息应该发送到哪些队列。　　相反的，生产者只能发送消息给交换机（Exchange）。交换机的作用非常简单，一边接收从生产者发来的消息，另一边把消息推送到队列中。交换机必须清楚的知道消息如何处理它收到的每一条消息。是否应该追加到一个指定的队列？是否应该追加到多个队

MQ
消息队列
RabbitMQ
原创 推荐 2015-10-11 04:57:33 8452 阅读 3点赞 1评论

RabbitMQ实例教程：用Java搞定工作队列

　　在上一节中，我们学会了使用编程的方式发送和接收一个命名好的队列。本节中我们将会使用工作队列在多个工作者之间分发任务。　　工作队列的核心思想是避免立即处理高密集度必须等待完成的任务。它采用了安排任务的方式，将一个任务封装成一个消息把它放进队列。在后台运行的工作进程到时候会将它弹出并执行，这样任务队列中的任务就会被工作进程共享执行。　　工作队列适用于Web应用中在一个短的HTTP请求中处理复杂任务

MQ
消息队列
RabbitMQ
原创 精选 2015-10-09 16:05:26 7027 阅读

RabbitMQ实例教程：Hello RabbitMQ World之Java实现

　　RabbitMQ要实现Hello World，其实也很简单。只需一个服务器来发送消息，另外有个客户端接收消息即可。　　整体的设计流程如下：　　消息生产者发送Hello到消息队列，消息消费者从队列中接收消息。　　下载依赖Jar包　　RabbitMQ要用Java实现发送消息，就必须使用Java客户端库。目前RabbizMQ的Java客户端库最新版为为 3.5.5 。可以从Maven仓库下载，也可以

MQ
消息队列
RabbitMQ
原创 推荐 2015-10-08 20:34:06 8227 阅读

RabbitMQ实例教程：Windows下安装RabbitMQ

    （1）下载RabbitMQ服务器    从RabbitMQ官网下载最新的稳定版。目前最新版本为3.5.1.    （2）移除RabbitMQ老版本。    如果之前安装了老版本的话，或者想要将Erlang VM从32位升级到64位，需要手动卸载RabbitMQ服务器。因为安装过程中并不会停止或移除旧的服务。&n

MQ
消息队列
RabbitMQ
原创 精选 2015-10-07 17:41:57 5127 阅读

消息队列的使用场景

   （一）短信发送    短信通常都是由第三方服务商提供的服务，对于其稳定性与可靠度来说，通常也就是打90分吧。对于那些需要发送短信的应用程序来说，通常将其放入队列中去处理，而不是傻傻的等待。    （二）日志记录    不是所有的日志记录都需要使用消息队列来处理。通常只有那些同时操作一个日志文件的情况下才

MQ
消息队列
原创 2015-10-06 20:21:20 3707 阅读

如果软件团队是军队

　　我一直在向，如果把软件研发项目比作一场战争，那么软件团队是否就是一个军队。软件团队研发项目上线的过程，就是军队作战的过程。如果是这样，那么BA是什么，DEV是什么，QA又是什么？终于有一天，我找到了答案。　　BA侦查员　　虽然很多人都觉得侦察员的作用不大，但他却往往决定着一场战役的胜败。一个优秀的侦察员也许让你觉察不出他的重要性，但是一个失败的侦察员可能会让你损失掉整个军队。一个优秀的侦查员不

软件军队
原创 精选 2015-09-25 05:11:40 995 阅读 1收藏

Copyright © 2005-2025 51CTO.COM 版权所有 京ICP证060544号

关于我们
官方博客 全部文章 热门标签 班级博客
了解我们 网站地图 意见反馈
友情链接
鸿蒙开发者社区 51CTO学堂
51CTO 软考资讯