增加Hadoop用户组，同时在该组里增加hadoop用户，后续在涉及到hadoop操作时，我们使用该用户。
转载
2023-11-29 20:09:04
53阅读
基于Linux系统搭建Hadoop文件服务器1.工具CentOS7虚拟机镜像、10.0版本以上的Vmware、Hadoop-2.7.7、Linux系统下的jdk1.8、MobaXterm远程连接工具2.Linux虚拟机安装 打开Vmware，进入安装导航页面，选择自定义安装，下一步。选择稍后安装操作系统选择安装Linux操作系统，版本选择CentOS7-64位的，具体的可以依据虚拟机的镜像来进行选
转载
2023-07-12 12:04:42
44阅读
❀因为学业原因，我需要学习在Ubuntu系统上面搭建出hadoop集群，此贴记录下我的搭建过程，防止以后自己忘记首先需要提前搭建好Ubuntu系统，在系统中配置上静态ipUbuntu20.04静态ip的配置：第一步：cd /etc/netplan 第二步：修改其下名为01-network-manager-all.yaml的文件 vi 01-network-manager-all.yaml 第三步：
一些说明和资源虚拟机：VirtualBox-6.1.18 Ubuntu：16.04桌面版 JDK：jdk-8u281-linux-x64.tar.gz hadoop：hadoop2.7.3 可能用到的资源：hadoop-instead安装虚拟机和Ubuntu16.04传送门：下载及安装教程稍有不同的地方：安装hadoop 1. 配置虚拟机网卡1. 打开VirtualBox
2. 点击右上角 管理
首先是VMware的安装 VMware的安装一般现在要求双核4g内存，至少30G硬盘。 1. Ubantu 12.04 x86a. 虚拟机内存设置1g左右即可 b. 虚拟机硬盘文件不要放到C盘 除非你特土豪 C盘很大c. 安装&
翻译
精选
2015-05-12 23:49:55
597阅读
目录ubantu16.04搭建Qt环境下载opensource安装qmake安装g++以及依赖库配置环境编译原码安装make查看qmake是否安装配置环境变量qmake编译c/c++代码安装qtcreatorLinux编译Qt代码ubantu16.04搭建Qt环境下载opensource「下载 qt-everywhere-opensource-src-4.8.7.tar.gz：http://dow
转载
2021-05-25 13:42:01
168阅读
目录ubantu16.04搭建Qt环境下载opensource安装qmake安装g++以及依赖库配置环境编译原码安装make查看qmake是否安装配置环境变量qmake编译c/c++代码Linux编译Qt代码ubantu16.04搭建Qt环境下载opensource下载 qt-everywhere-opensource-src-4.8.7.tar.gz：http://download.qt-project.org/archive/qt/4.8/4.8.7/安装qmake安装g++以及依赖库su
原创
2021-06-17 10:09:15
243阅读
Hadoop基础环境搭建（转载尚硅谷）说明个人学习记录基于虚拟机搭建，需要提前准备虚拟机环境搭建版本：hadoop-3.1.3搭建HDFS和yarn提前准备Hadoop安装包：hadoop-3.1.3.tar.gzHadoop下载地址：https://archive.apache.org/dist/hadoop/common/hadoop-3.1.3/
提前准备JDK安装包：jdk-8u212-l
转载
2023-07-20 18:35:45
56阅读
文章目录一、下载安装所需的资源二、配置1、将下载的hadoop文件解压2、配置环境变量在path中加入 %HADOOP_HOME%\bin3、文件配置3.1、D:\hadoop\hadoop-3.0.2\etc\hadoop”下的core-site.xml文件3.2、D:\hadoop\hadoop-3.0.2\etc\hadoop”目录下的mapred-site.xml3.3、D:\hadoo
转载
2023-07-24 15:53:41
162阅读
文章目录前言一、虚拟机安装二、安装JDK和Hadoop1.基本信息配置2.安装JDK和Hadoop三、安装Zookeeper集群四、Hadoop集群的高可用配置五、Hadoop集群的正常启动顺序总结 前言Hadoop开发环境搭建为了防止以后每次搭建的时候查看太多教程而导致时间无端消耗，本次重装环境自行进行过程记录。一、虚拟机安装基于VMware平台安装centos8，主要就是下载镜像安装打开就行
转载
2023-07-11 13:06:23
115阅读
文章目录1.事前准备2.主机互联（namenode和datanode都做）2.1 创建虚拟机2.2 配置网络2.2.1寻找空闲IP地址2.2.2配置ifcfg-eno167777362.2.3 pc端ssh登录linux2.3 实现相互免密登录（namenode和datanode都做）2.3.1修改主机名及主机配置文件2.3.1生成公钥实现免密登录3.配置java jdk（namenode和da
转载
2023-07-25 20:14:25
104阅读
仅是个人学习记录，内容来源尚硅谷大学 1、Hadoop是什么 Hadoop是一个由Apache基金会所开发的分布式系统基础框架。主要解决，海量数据的存储和海量数据的分析计算问题。广义上来说，Hadoop通常是指一个更广泛的概念——Hadoop生态圈。 2、Hadoop优势 高可靠性：Hadoop底层 ...
转载
2021-09-10 19:28:00
249阅读
2评论
最近在网上学习了下Hadoop，顺便记录了下笔记，笔记内容来源于某谷，主要是方便直接粘贴使用（莫谷貌似没在线的文
1 新建一个用户useradd hadooppasswd hadoop2 要有java环境3 关闭防火墙serv ice iptables stop4. tar -zxvf解压hadoop.tar5 配置5.1配置JAVA_HOMEcd hadoop/hadoop-env.sh如何知道JAVA_HOME:echo $JAVA_HOM...
原创
2022-11-29 18:07:26
85阅读
前言Hadoop在大数据技术体系中的地位至关重要，Hadoop是大数据技术的基础，对Hadoop基础知识的掌握的扎实程度，会决定在大数据技术道路上走多远。这是一篇入门文章，Hadoop的学习方法很多，网上也有很多学习路线图。本文的思路是：以安装部署ApacheHadoop2.x版本为主线，来介绍Hadoop2.x的架构组成、各模块协同工作原理、技术细节。安装不是目的，通过安装认识Hadoop才是目
转载
2018-10-31 17:21:32
740阅读
点赞
hadoop集群环境的搭建
集群信息如下： 主机名 Hadoop角色 Hadoop jps命令结果 Hadoop用户 Hadoop安装目录 master Master slaves NameNode DataNode JobTracker TaskTracker SecondaryNameNode 创建相同的用户的组名：hadoop。 安装hadoop-0.20.2时使用hadoop用
转载
2023-09-26 15:52:29
58阅读
hadoop介绍及基本环境搭建，及高可用环境搭建
原创
精选
2018-05-28 17:26:58
8995阅读
点赞
1.安装JDK1.1在Linux系统中，执行以下命令，下载JDK1.8安装包。wget https://download.java.net/openjdk/jdk8u41/ri/openjdk-8u41-b04-linux-x64-14_jan_2020.tar.gz1.2执行以下命令，解压下载的JDK1.8安装包。tar -zxvf openjdk-8u41-b04-linux-x64-14_j
原创
精选
2023-07-05 14:20:03
302阅读
# Hadoop 环境搭建教程
## 1. 概述
在本教程中，我们将学习如何搭建 Hadoop 环境。Hadoop 是一个开源的分布式计算框架，用于处理大规模数据集。它提供了可靠、可扩展的存储和处理大数据的能力。通过搭建 Hadoop 环境，您可以学习和使用 Hadoop 的各种功能。
## 2. Hadoop 环境搭建流程
下表展示了搭建 Hadoop 环境的步骤：
| 步骤 | 描述
原创
2023-11-27 12:18:14
13阅读
前言 Hadoop是一个开源的、可运行与Linux集群上的分布式计算平台，用户可借助Hadoop存有基础环境的配置（虚拟机安装、Linux安装等），Hadoop集群搭建，配置和测试。二、Linux系统安装1.环境准备Centos7镜像文件(mini)Centos7下载链接：https://mirrors.tuna.tsinghua.edu.cn/centos/7.9.2009/isos/x86
原创
2023-09-25 19:19:49
212阅读
