乐胖代购免代理版

python多线程连接MySQL查数案例

该博文展示地是基本示例，实际使用时可能需要进行调整。例如，你可能需要添加错误处理来确保数据库连接问题不会导致脚本崩溃，或者你可能需要调整查询以匹配你的数据。此外，你需要确保你的系统有足够的内存和处理能力来支持并行处理。如果数据库查询非常消耗资源，你可能需要考虑使用并发处理而不是并行处理，以避免系统过载。

python

mysql

开发语言

并行处理

数据库查询

原创 2024-03-08 08:05:39 21 阅读

大数据StarRocks(六) ：Catalog

StarRocks 自 2.3 版本起支持 Catalog（数据目录）功能，实现在一套系统内同时维护内、外部数据，方便您轻松访问并查询存储在各类外部源的数据。

大数据

starrocks

数据

hive

数据源

原创精选 2024-03-07 08:34:40 619 阅读

大数据StarRocks(五) ：数据类型

StarRocks 支持数据类型：数值类型、字符串类型、日期类型、半结构化类型、其他类型。您在建表时可以指定以下类型的列，向表中导入该类

大数据

StarRocks

数据

JSON

字符串

原创 2024-03-07 08:34:31 800 阅读

clickhouse常规的优化方法

在ClickHouse表中数据存储时，对于一些列尽量不使用Nullable类型存储，因为此类型需要单独创建额外的文件来存储NULL的

clickhouse

大数据

数据

字段

SQL

原创 2024-03-07 08:34:25 135 阅读

SQL优化小技巧

尽量避免使⽤where 1=1，优化：⽤代码拼接sql，需要where的地⽅加where，需要and的地⽅加and。尽量避免使⽤游

sql

数据库

字段

默认值

数据

原创 2024-03-07 08:34:02 27 阅读

大数据StarRocks(七)：数据表创建

建表的基本语法[key_desc]参数说明col_name：列名称注意，在一般情况下，不能直接创建以以 __op 或 __row 开头命名的列

大数据

StarRocks

数据

建表

默认值

原创 2024-03-07 08:33:58 403 阅读

DBA技术栈（三）：MySQL 性能影响因素

大部分人都一致认为一个数据库应用系统（这里的数据库应用系统概指所有使用数据库的系统）的性能瓶颈最容易出现在数据的操作方面

dba

mysql

数据库

数据

MySQL

原创 2024-03-07 08:33:50 41 阅读

大数据StarRocks(八)：集群扩缩容

StarRocks FE 节点分为 Follower 节点和 Observer 节点。Follower 节点参与选举投票和写入，Observer 节点只用来同步

大数据

StarRocks

高可用

IP

正常运行

原创 2024-03-07 08:33:44 249 阅读

python异常修复：UnicodeDecodeError: ‘gbk‘ codec can‘t decode byte 0xbf in position 391: illegal multibyte

在使用configparser模块读取配置文件的参数是，出现如图报错。

python

开发语言

配置文件

编码方式

特殊字符

原创 2024-03-07 08:33:41 2106 阅读

DBA技术栈MongoDB：简介

MongoDB是一个可扩展、开源、表结构自由、用C++语言编写且面向文档的数据库，旨在为Web应用程序提供高性

dba

mongodb

数据库

关系数据库

数据

原创 2024-03-07 08:33:36 45 阅读

DBA技术栈MongoDB: 索引创建和查询优化

MongoDB可以在一个集合上建立一个或多个索引，而且必须为在字段_id建立一个索引，建索引的目的与关

dba

mongodb

数据库

字段

i++

原创精选 2024-03-07 08:33:35 143 阅读

DBA技术栈MongoDB: 数据增改删除

该博文主要介绍mongoDB对文档数据的增加、更新、删除操作。

mongodb

数据库

字段

操作符

删除操作

原创 2024-03-07 08:33:24 22 阅读

大数据StarRocks(九)：资源隔离实战

自 2.2 版本起，StarRocks 支持资源组管理，集群可以通过设置资源组（Resource Group）的方式限制查询对资源的

大数据

网络

数据库

Starrocks

默认值

原创精选 2024-03-07 08:33:21 302 阅读

hadoop必记知识点（2）

在 Hadoop 集群进行计算时，可能会遇到多个瓶颈，但最主要的通常包括网络带宽、存储以及 CPU 处理能力。网络带宽：Hadoop 集群中的各个节点需要频繁地进行数据传输和通信，这就需要网络带宽足够大。如果网络带宽不足，节点之间的数据交换将会变得缓慢，从而影响整个集群的计算性能。存储：Hadoop

hadoop

大数据

分布式

Hadoop

数据

原创 2024-03-07 08:33:09 35 阅读

hadoop必记知识点（1）

传统的单机数据库或服务器在面对海量数据时，处理速度慢，扩展性差，而Hadoop通过分布式架构，可以将海量数据

hadoop

大数据

分布式

Hadoop

数据处理

原创 2024-03-07 08:33:04 20 阅读

MySQL查询优化技巧和10个案例展示

以下案例仅为 MySQl 查询优化的冰山一角，实际应用中可能需要根据具体的数据模型、查询模式和业务需求进行更为深入的优化。通常，优化包括询速度。

mysql

数据库

查询语句

数据

MySQL

原创 2024-03-07 08:32:59 111 阅读

hadoop必记知识点（3）

需要注意的是，Combiner的输出和Reduce的输出类型应该是一样的，而且Combiner的函数应该是可合并的，即多个Combiner的输出可

hadoop

大数据

分布式

Hadoop

序列化

原创 2024-03-07 08:32:55 26 阅读

大数据StarRocks(四) ：常用命令

这次主要介绍生产工作中Starrocks时的常用命令。

大数据

StarRocks

mysql

当前用户

hadoop

原创 2024-01-15 12:12:10 439 阅读

DBA技术栈（二）：MySQL 存储引擎

上个业余的图：MyISAM 存储引擎是 MySQL 默认的存储引擎，也是目前 MySQL 使用最为广泛的存储引擎之一。他的前身就是我们在 MySQL

dba

mysql

数据库

存储引擎

数据

原创 2024-01-15 12:12:01 25 阅读

基于python编写的服务器之间流量传输netflow_exporter

通常企业会在多个机房部署IT系统，在大数据基础服务组件中会集群跨机房部署或是跨机房抽取数据的场景，在抽数任务时间节点

python

开发语言

服务器

数据

原创精选 2024-01-15 12:11:55 410 阅读

大数据StarRocks(二) StarRocks集群部署

最终以压测中预期结果最好的机器配置进行申请，如果公司很rich的话，直接用80c/256G的机器配置。4.压测可以采用官网提供的压测工具

大数据

StarRocks

hadoop

mysql

IP

原创 2024-01-15 12:11:45 543 阅读

大数据概念：数据网格和DataOps

数据运维的核心理念是将数据作为一种服务，通过持续集成、持续交付和持续运营的方式，实现数据的快速、可靠和

大数据

数据

数据仓库

数据处理

原创 2024-01-15 12:11:37 79 阅读

DBA技术栈（一）：Mysql简介和架构基本组成

MySQL 是由 MySQL AB 公司（目前已经被 SUN 公司收归麾下）自主研发的，目前 IT 行业最流行的开放源代码的数据库管理

dba

mysql

架构

MySQL

SQL

原创 2024-01-15 12:11:34 91 阅读

大数据StarRocks(三) StarRocks数据表设计

StarRocks的表和关系型数据库类似, 由行和列构成. 每行数据对应用户一条记录, 每列数据有相同数据类型. 所有数据行的列数相同, 可以动态增删列到多维指标的映射.

大数据

starrocks

数据

主键

建表

原创 2024-01-15 12:11:27 392 阅读

大数据StarRocks(一) StarRocks概述

StarRocks是新一代极速全场景MPP(Massively Parallel Processing)数据库，它充分吸收关系型OLAP数据库和分布式存储系统在大数据

大数据

数据分析

数据

元数据

原创 2024-01-15 12:11:18 268 阅读

python定时查询starrocks将结果保存在excel

在工作过程中要定期的更新excel表的信息，每个星期都要去查询strarocks的数据导出结果到excel，俗话说：”不会偷懒的运维不是好

python

starrocks

doris

sql

MySQL

原创 2024-01-15 12:11:12 183 阅读

starrocks集群fe/be节点进程守护脚本

自建starrocks集群，有时候服务会挂掉，无法自动拉起服务，于是采用supervisor进行进程守护。可能是版本的原因，supervisor程序总是异

linux

shell脚本

相对路径

空字符串

原创 2024-01-15 12:11:01 211 阅读

go编写的netflow _exporter，本地测试代码

【代码】go编写的netflow _exporter，本地测试代码。

golang

开发语言

后端

github

遍历文件

原创 2024-01-15 12:10:52 81 阅读

(promethues）node_exporter注册自定义监控数据，简单展示

Collect(ctx context.Context) (metrics, error): 此方法用于收集和返回自定义指标。Describe(ctx context.Context, ch chan

go

后端

prometheus

自定义

服务器

原创精选 2024-01-15 12:10:48 304 阅读

分包zip压缩，解压报错：invalid zip file with overlapped components (possible zip bomb)

在生产环境中，需要把安装包从本地传到服务器上，传输过程中网络抖动的原因造成大文传输失败。可以将文件分包压缩成200M或500M大小的文件，然后分批传输到服务器。

linux

环境变量

服务器

hive

原创 2024-01-15 12:10:32 2460 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

12474226

python多线程连接MySQL查数案例

大数据StarRocks(六) ：Catalog

大数据StarRocks(五) ：数据类型

clickhouse常规的优化方法

SQL优化小技巧

大数据StarRocks(七)：数据表创建

DBA技术栈（三）：MySQL 性能影响因素

大数据StarRocks(八)：集群扩缩容

python异常修复：UnicodeDecodeError: ‘gbk‘ codec can‘t decode byte 0xbf in position 391: illegal multibyte

DBA技术栈MongoDB：简介

DBA技术栈MongoDB: 索引创建和查询优化

DBA技术栈MongoDB: 数据增改删除

大数据StarRocks(九)：资源隔离实战

hadoop必记知识点（2）

hadoop必记知识点（1）

MySQL查询优化技巧和10个案例展示

hadoop必记知识点（3）

大数据StarRocks(四) ：常用命令

DBA技术栈（二）：MySQL 存储引擎

基于python编写的服务器之间流量传输netflow_exporter

大数据StarRocks(二) StarRocks集群部署

大数据概念：数据网格和DataOps

DBA技术栈（一）：Mysql简介和架构基本组成

大数据StarRocks(三) StarRocks数据表设计

大数据StarRocks(一) StarRocks概述

python定时查询starrocks将结果保存在excel

starrocks集群fe/be节点进程守护脚本

go编写的netflow _exporter，本地测试代码

(promethues）node_exporter注册自定义监控数据，简单展示

分包zip压缩，解压报错：invalid zip file with overlapped components (possible zip bomb)

欢迎