镜像仓库Habor的安装、高可用、https加密
原创
2023-06-12 13:24:52
104阅读
一、创建ceph存储池在ceph集群的mon节点上执行以下命令：
ceph osd pool create k8s 64
查看下副本数
# ceph osd pool get k8s size
size: 2
pg的设置参照以下公式：
Total PGs = ((Total_number_of_OSD * 100) / max_replication_count) / pool_count
结
转载
2023-08-23 09:28:45
34阅读
Habor是一个开源的镜像仓库，用于存储和管理Docker镜像。下面是Habor的安装、高可用和https加密教程：安装Habor：下载并解压最新版本的Habor软件包。修改配置文件harbor.yml，根据需要配置数据库、存储等参数。运行install.sh脚本进行安装。配置高可用：在多台服务器上分别安装并配置好独立的Harbor实例。使用负载均衡器（如Nginx）将流量分发到不同Harbor实
什么是高可用？高可用的定义维基百科中对于高可用的定义如下：高可用性（英语：high availability，缩写为 HA），IT术语，指系统无中断地执行其功能的能力，代表系统的可用性程度。是进行系统设计时的准则之一。高可用性系统与构成该系统的各个组件相比可以更长时间运行。[1]高可用性通常通过提高系统的容错能力来实现。高可用描述的是一个系统在大部分时间都是可用的，可以为我们提供服务的。高可用代表
转载
2023-09-25 12:18:27
47阅读
需求描述：
ucloud的hadoop大数据使用的hive不支持高可用，hive经常出问题，商务和其他业务同事通过hue或者zeeplin查询的时候经常不出结果，重启hive服务后就好了，过一段时间就又不行了，需要反复重启，比较头疼
在网上搜索了一下关于hive的高可用方案：
1.通过zookeeper对hive进行管理(后面测试发现不行，停用其中一台hiveserver2，zookeeper确
转载
2023-10-17 18:30:30
204阅读
在存储领域中，存储系统的高可用性一直是关注的重点。随着用户对于存储系统的可用性需求不断变化，高可用技术在不断发展演变。高可用的方案与技术,可分为如下三种：磁盘级的高可用这是指部分磁盘的损坏不影响集群的可用性。常用的实现方法有：RAID、SAN磁盘阵列。服务器级的高可用这是指单台服务器的失效，不影响整个系统的可用性。常用的实现方法为：双机热备；软件层面实现的数据副本（比如SDS中的多副本冗余策略）。
转载
2023-10-27 07:29:11
40阅读
一、常见的MySQL高可用架构 MySQL高可用主要涉及两个方面，一是客户端如何切换，如何自动failover，二是多个MySQL节点之间如何做数据同步。业界MySQL高可用的解决方案有很多，总结起来有几类：从客户端自动切换的角度来看主要有两类：一类是基于HA同步软件的MySQL高可用，用户通过VIP访问数据库，然后第三方组件监控MySQL的状态，控制VIP的漂移。还有一类是基于API调用的My
转载
2023-09-08 12:46:56
61阅读
hbase的高可用什么是hbase的高可用？指的是：让master节点能够有多个，当节点宕机后，能够有备份的节点顶的上来，此时认为master形成了高可用状态如何实现hbase的主节点的高可用呢？环境为VMware 三台虚拟机在hbase的conf目录下，创建backup-master文件，并添加如下内容:node1中执行:
cd /export/server/hbase-2.1.0/conf/
转载
2023-09-20 06:36:57
109阅读
一、什么是高可用高可用HA（High Availability）是分布式系统架构设计中必须考虑的因素之一，它通常是指，通过设计减少系统不能提供服务的时间。假设系统一直能够提供服务，我们说系统的可用性是100%。如果系统每运行100个时间单位，会有1个时间单位无法提供服务，我们说系统的可用性是99%。很多公司的高可用目标是4个9，也就是99.99%，这就意味着，系统的年停机时间为8.76个小时。百度
文章目录高可用场景及解决方案keepalived的安装 高可用场景及解决方案一般高可用的服务端会都有备用服务，当某一个服务节点挂掉的时候就会有备用机顶上。这往往需要反向代理(Nginx)来将连接切换到可用的服务机器上。如下图：那么，当反向代理服务Nginx挂掉之后，就没办法再对外提供服务了。所以，要想Nginx也高可用就需要有备用Nginx，每个Nginx服务上都有负责检测的keepalived
高可用性（High Availability）指的是通过尽量缩短因日常维护操作（计划）和突发的系统崩溃（非计划）所导致的停机时间，以提高系统和应用的可用性。如何实现高可用？避免导致系统不可用的因素（服务器磁盘空间耗尽、性能糟糕的SQL、表结构和索引没有优化、主从数据不一致、人为的操作失误等等），减少系统不可用的时间；
建立完善的监控及报警系统；定时的对备份数据进行恢复测试；对不需要的数据进行
转载
2023-06-07 21:33:56
149阅读
1.MySQL复制功能介绍 MySQL复制功能提供分担读负载。使用复制功能对数据库服务器进行水平扩展，MySQL的复制是异步的。复制解决了什么问题： 实现在不同服务器上的数据分布： 利用二进制日志增量进行 不需要太多
转载
2023-09-16 10:55:08
68阅读
先达到极限，然后再突破它HA高可用HA概述所谓HA（High Available），即高可用（7*24小时不中断服务）。实现高可用最关键的策略是消除单点故障。HA严格来说应该分成各个组件的HA机制：HDFS的HA和YARN的HA。Hadoop2.0之前，在HDFS集群中NameNode存在单点故障（SPOF）。NameNode主要在以下两个方面影响HDFS集群NameNode机器发生意外，如宕机，
转载
2023-05-24 15:30:06
146阅读
HBase的优化（一）高可用在HBase中Hmaster负责监控RegionServer的生命周期，均衡RegionServer的负载，如果Hmaster挂掉了，那么整个HBase集群将陷入不健康的状态，并且此时的工作状态并不会维持太久。所以HBase支持对Hmaster的高可用配置。1) 关闭HBase集群（如果没有开启则跳过此步）$ bin/stop-hbase.sh2) 在conf目录下创建
转载
2023-06-13 14:46:57
79阅读
MYSQL–架构–理论–01–高可用方案的优缺点、选型高可用考虑点如果数据库发生了宕机或者意外中断等故障，能尽快恢复数据库的可用性，尽可能的减少停机时间，保证业务不会因为数据库的故障而中断。用作备份、只读副本等功能的非主节点的数据应该和主节点的数据实时或者最终保持一致。当业务发生数据库切换时，切换前后的数据库内容应当一致，不会因为数据缺失或者数据不一致而影响业务。一、主从或主主半同步复制使用双节点
原创
2022-05-04 13:58:03
274阅读
一、名字释义：高可用性，英文叫做High Availability，检查HA,我们一般称为高可用或者ha。二、高可用的出现是为了解决什么问题？ 为了解决单点故障的问题，才出现了高可用。高可用的目的就在于解决单点故障，减少停工时间，从而保持了服务的高度可用性。三、跟高可用相关的概念或者说术语有哪些？&nbs
转载
2023-09-25 21:36:44
59阅读
概念高可用性，金融数据中心建设中最受关注的问题之一。高可用性设计是个系统工程，其内容涉及构成数据中心的四个组成要素（网络、计算、存储、机房基础设施）的多方面内容。计算机系统的可用性(availability)是通过系统的可靠性(reliability)和可维护性(maintainability)来度量的。工程上通常用平均无故障时间(MTTF)来度量系统的可靠性,用平均维修时间（MTTR
转载
2023-08-17 18:44:48
36阅读
引言RocketMq 作为一个成熟的消息中间件，自身保证了高可用性。学习RocketMq中的高可用性可以帮助我们自己在平时编写代码时能够编写处高可用的代码。 对于RocketMq，高可用主要在这四块进行保证消息发送的高可用：在消息发送时可能会遇到网络问题、Broker 宕机等情况导致消息没有发送成功消息存储的高可用：在 RocketMQ 中消息存储时Broker发生故障导致消息没有保存下来消息消费
说明高可用对于互联网应用基本上是标配，目的是最大程度的为用户提供服务，避免因为服务器宕机等意外故障而终止服务。相比于无状态服务（如前后端应用），数据库服务的高可用问题更为复杂，不仅仅是能访问，更需要保证其数据的正确性。在考虑数据库高可用架构时，需要考虑以下问题：数据库服务器如果发生宕机或者意外中断等故障，能够尽快恢复数据库服务的可用性，减少停机时间用作备份、只读副本等功能的非主节点应该与主节点的数
# Docker Harbor实现流程
## 1. 什么是Docker Harbor
Docker Harbor是一个开源的企业级Docker Registry，它提供了一个方便的方式来存储、传输和管理Docker镜像。使用Docker Harbor可以轻松地搭建自己的私有Docker Registry，方便团队内部共享和管理镜像。
## 2. Docker Harbor的实现流程
下面是
原创
2023-09-12 05:53:52
54阅读
