乐胖代购免代理版

java操作hdfs

package cagy.hap;import java.io.FileNotFoundException;import java.io.IOException;import org.apache.hadoop.conf.Configuration;import org.apache.hadoop.fs.FileStatus;import org.apache.hadoop.fs.Fil...

apache

System

hadoop

原创 2023-01-09 19:11:16 121 阅读

hadoop 2.4.1单机安装教程 99.9%成功率

1.先自己安装centos7.X 64位2.自己想办法安装JDK1.7,记住不要open sdk的3.

田尚滨

HADOOP单机安装

xml

hadoop

vim

原创 2023-01-09 19:11:07 146 阅读

mapreduce基础JOB操作

package cagy.mapreduce.wordcount;import java.io.IOException;impo

hadoop

apache

Text

原创 2023-01-09 18:16:38 74 阅读

HDFS常用基础命令

hadoop fs -cat /wc/output1/part-r-00000hadoop fs -ls /wc/outp

hadoop

jar

当前目录

原创 2023-01-09 18:16:30 60 阅读

hbase的thrift接口c#

1、get(byte[] tableName,byte[] row,byte[] column,Dictionary<byte[],byte[]

List

值类型

表名

原创 2023-01-09 18:13:36 94 阅读

kettle连接hive2 HDP2.6

1.配置插件文件夹的属性hdp252.查看依赖项的路径locate */hive/lib/hive*jar

hive

主目录

jar

原创 2023-01-09 18:11:51 142 阅读

数据湖的简单解释

数据湖轻松地收集数据：管他什么样的数据，我先把它存到我的库里面，不清数据...

数据

数据仓库

原始数据

原创 2023-01-09 18:11:08 152 阅读

hadoop集群日常

service ntpd stopntpdate 172.16.13.3echo 1 > /proc/sys/vm/drop_cachesecho 2 > /proc/sys/vm/drop_cachesecho 3 > /proc/sys/vm/drop_caches

java

原创 2023-01-09 18:09:35 88 阅读

phoenix映射hbase的简单操作

hbase shell#创建表，插入数据create 'cagy','info'put 'ca

hbase

大数据

bc

jar

cloudera

原创 2023-01-09 18:00:27 52 阅读

dataX从hbase抽数到postgresql

python datax.py ./hbase_pg.jso#抽数的JSON文件

postgresql

hbase

数据库

bc

python

原创 2023-01-09 18:00:14 67 阅读

hadoop硬件配置高可用 datanode namenode硬件配置

每个分布式文件系统分块在NameNode的内存中大小约为250个字节，此外还要加上文件和目录所需的250字节空间。 500字节一个块假设我们有5000个平均大小为20GB的文件并且使用默认的分布式文件系统分块大小（64MB）同时副本因子为3， 5000*20GB=102400 000M=97T那么NameNode需要保存5千万个分块的信息，这些分块的大小加上文件系统的开销总共需要1.5GB的内

hadoop硬件

田尚滨

数据存储

分块

数据

原创 2023-01-09 17:39:56 232 阅读

官方博客	全部文章	热门标签	班级博客
了解我们	网站地图	意见反馈

鸿蒙开发者社区	51CTO学堂
51CTO	软考资讯

51CTO博客

wx5e0177d9ed7d4的博客

java操作hdfs

hadoop 2.4.1单机安装教程 99.9%成功率

mapreduce基础JOB操作

HDFS常用基础命令

hbase的thrift接口c#

kettle连接hive2 HDP2.6

数据湖的简单解释

hadoop集群日常

phoenix映射hbase的简单操作

dataX从hbase抽数到postgresql

hadoop硬件配置高可用 datanode namenode硬件配置

欢迎