乐胖代购免代理版

五个篇章讲明白如何从0到1搭建大数据平台

数据

hive

spark

置顶原创 2022-06-06 15:43:00 613 阅读 1点赞 1收藏 4评论 yyds干货盘点

数据开发十条锦囊

大家好，我是一哥数据开发过程中，大家通常都会踩过一些坑，今天给大家分享10条数据开发锦囊，让大家尽量少踩坑，没有关注我的新朋友可以关注下方公众号，加入数据开发群，领取资料。下面从开发类和业务类两个方面给大家总结几条实用锦囊，建议收藏，如有补充，可以在文末留言开发类Article6关联数据之前，先检查维度表，各维度的值是否有异常，比如null，空值，异常值等等。Article5进行聚合操作后，检查聚

数据

运维

开发类

原创 2022-09-02 10:15:28 214 阅读

spark异常：missing an output location for shuffle 0

巡检任务发现，今天有个任务报错了，一看没有修改过，先重启了，过了几分钟又报错了emo.......然后检查日志，发现报错了：javascriptmissinganoutputlocationforshuffle0：。。。。。。。。。。。。。。。。。。。。。。于是查了下，发现是任务spark.sql.shuffle.partitions设置的是200，该任务数据量大，于是调大了spark.sql.s

数据

spark

sql

原创精选 2022-07-12 09:13:18 424 阅读 1点赞 1收藏 2评论 yyds干货盘点

如何转行数据产品经理

随着移动互联网的爆发和逐渐成熟，海量的数据被采集和存储下来，伴随而来的大数据、云计算、人工智能等新兴技术愈发

数据

产品经理

数据分析

转载 2022-07-04 10:12:07 205 阅读 1点赞 1收藏

【数据说第十三期】数据驱动业务增长的底层逻辑

【写在前面】前面梳理交流了如何通过分析“新增”、“活跃”、“留存”等数据，本季主要深挖用户表面行为的

数据

数据分析

数据驱动

转载 2022-07-04 10:09:48 97 阅读

想转型数据驱动，ETL是拦路虎？十年来的传统工作模式，该升升级了

大数据业内有两个趋势，已经悄悄滋生出来。两个趋势下，你面临的可能是个无法解决的问题第一个趋势，是在任何一个公

数据

数据架构

数据集

转载 2022-07-04 10:08:04 79 阅读

漫谈ClickHouse在实时分析系统中的定位与作用

数据库

监控系统

大数据

原创 2022-07-04 10:04:06 312 阅读

从0到1搭建大数据平台之计算存储系统

前面已经给大家讲了《从0到1搭建大数据平台之数据采集系统》、《从0到1搭建大数据平台之调度系统》，今天给大家

hive

spark

大数据平台

原创 2022-07-04 10:02:05 182 阅读

干货收藏！《python数据分析指南》

《python数据分析指南》数据下载！

数据分析

公众号

python

原创 2022-07-04 10:01:00 144 阅读

连载：阿里巴巴大数据实践—数据开发平台

阿里数据人都在用的内部技术经验关注数智化转型俱乐部，数智化不迷路摘要介绍MaxCompute和阿里巴巴内部基

数据

sql

字段

转载 2022-07-04 10:00:18 388 阅读

如何做用户画像，收藏！

导读：在互联网步入大数据时代后，用户行为给企业的产品和服务带来了一系列的改变和重塑，其中最大的变化在于，用户

数据

用户画像

数据仓库

转载 2022-07-04 09:58:58 886 阅读

连载：阿里巴巴大数据实践—实时技术

阿里数据人都在用的内部技术经验关注数智化转型俱乐部，数智化不迷路摘要相对于离线批处理技术，流式实时处理技术作

数据

离线

表数据

转载 2022-07-04 09:54:12 143 阅读

从0到1，搭建互联网运营分析体系

有指标，无体系有数字，无分析有图表，无结论是做数据的同学们在实际工作中最大痛点。今天拿运营做例子，系统讲解

数据

数据分析

工作流程

转载 2022-07-04 09:53:29 107 阅读

附PPT|阿里巴巴实时数仓最新架构图

1优酷大数据olap选型分享嘉宾：五羖,阿里文娱技术专家分享大纲：大数据给传统数据技术带来的挑战市面

数据

从0到1

大数据平台

转载 2022-07-04 09:32:08 948 阅读

收藏！如何建设数据团队 | 2020年《顶级数据团队建设全景报告》重磅发布

数据社也参与了报告的调查，文末下载完整分析报告！

数据

大数据

职业规划

转载 2022-07-04 09:23:27 334 阅读

基于CDH（Cloudera Distribution Hadoop）的大数据平台搭建

“Apache Hadoop存在版本管理混乱、部署过程繁琐、升级过程复杂、兼容性差、安全性低等问题，CDH是

cloudera

html

重启

原创精选 2022-07-04 09:21:19 517 阅读

大数据≠hadoop，数据中台选型你应该看到这些分布式数据库

你该选择什么样的计算引擎？

数据

sql

hive

转载 2022-07-04 09:17:40 110 阅读

基于Ambari的大数据平台搭建

使用ambari从0到1搭建大数据平台

ambari

centos

html

原创 2022-06-30 11:48:37 390 阅读

数据驱动业务增长的底层逻辑2.0

《数据说·梦想季》漫漫人生路，向左，向右，方向心已确定，只是等车来，不管前行有多难，只要怀揣梦想，终能到达心

数据

数据驱动

数据分析

转载 2022-06-30 11:46:37 48 阅读

数仓开发应避免的10个陷阱

写在前面在Ralph Kimball和Margy Ross的《数据仓库工具箱》一书中

数据

数据仓库

数据模型

转载 2022-06-30 11:45:15 72 阅读

建议收藏！浅谈OLAP系统核心技术点

作者：neoReMinDOLAP系统广泛应用于BI、Reporting、Ad-hoc、ETL数

数据

sql

执行计划

转载 2022-06-30 11:43:19 83 阅读

连载：阿里巴巴大数据实践—数据服务

阿里数据人都在用的内部技术经验关注数智化转型俱乐部，数智化不迷路摘要服务架构的每次升级，均在性能、稳定性、扩

数据

数据源

从0到1

转载 2022-06-30 11:42:36 114 阅读

干货！两万字深度介绍分布式系统原理

作者：Guanzhou Song原文： .com/luckcs/articles/1

数据

元数据

服务器

转载 2022-06-30 11:41:20 153 阅读

被嫌弃没有数据分析方法论？把OSM模型怼他脸上!

‍‍‍‍“你做数据分析的方法论是什么？”这个问题让很多新手同学两股战战。啥是数据分析方法论？每天select

数据分析

数据驱动

执行计划

转载 2022-06-30 11:38:02 98 阅读

一条SQL引发的“血案”：与SQL优化相关的4个案例

数据工作者必备语言：SQL！

sql

数据库

执行计划

转载 2022-06-30 11:25:51 88 阅读

Kafka实战宝典：Kafka的控制器controller详解

一文读懂控制器组件（Controller）

zookeeper

kafka

数据

原创 2022-06-30 11:23:41 159 阅读

数据诊断模型，该怎么搭建？

你会用数据下判断吗？你怎么确定你的判断是准确的？现在业务说你判断错了，你怎么应对？用数据下判断，是看似简单

数据分析

数据

生命周期

转载 2022-06-30 11:21:56 56 阅读

数据分析新人如何面对繁杂且突然的数据需求

刚刚转行在一家互联网金融机构做业务部门的数据分析师，目前只有我一个人，在平时的工作中会面临着大量的数据需求，

数据

数据分析

sql

原创 2022-06-30 11:19:52 189 阅读

数仓面试|四个在工作后才知道的SQL密技

SQL是大数据从业者的必备技能，大部分的大数据技术框架也都提供了SQL的解决方案。可以说SQL是一种经久不衰

sql

hive

数据

转载 2022-06-30 11:18:05 118 阅读 1收藏

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

数据社

五个篇章讲明白如何从0到1搭建大数据平台

数据开发十条锦囊

spark异常：missing an output location for shuffle 0

如何转行数据产品经理

【数据说第十三期】数据驱动业务增长的底层逻辑

想转型数据驱动，ETL是拦路虎？十年来的传统工作模式，该升升级了

漫谈ClickHouse在实时分析系统中的定位与作用

从0到1搭建大数据平台之计算存储系统

干货收藏！《python数据分析指南》

连载：阿里巴巴大数据实践—数据开发平台

如何做用户画像，收藏！

连载：阿里巴巴大数据实践—实时技术

从0到1，搭建互联网运营分析体系

附PPT|阿里巴巴实时数仓最新架构图

收藏！如何建设数据团队 | 2020年《顶级数据团队建设全景报告》重磅发布

基于CDH（Cloudera Distribution Hadoop）的大数据平台搭建

大数据≠hadoop，数据中台选型你应该看到这些分布式数据库

推荐一款可视化+NoteBook工具

基于Ambari的大数据平台搭建

数据驱动业务增长的底层逻辑2.0

数仓开发应避免的10个陷阱

建议收藏！浅谈OLAP系统核心技术点

连载：阿里巴巴大数据实践—数据服务

干货！两万字深度介绍分布式系统原理

被嫌弃没有数据分析方法论？把OSM模型怼他脸上!

一条SQL引发的“血案”：与SQL优化相关的4个案例

Kafka实战宝典：Kafka的控制器controller详解

数据诊断模型，该怎么搭建？

数据分析新人如何面对繁杂且突然的数据需求

数仓面试|四个在工作后才知道的SQL密技

欢迎