培训教育行业网站建设方案,室内设计师联盟首页,做音频的网站,电商网页制作素材目录
一、获取VMware安装包 1、官网获取
1#xff09;首先先进入官网#xff0c;官网首页是下面这样#xff1a; 2#xff09;接着点击产品选项 3#xff09;进入后点击查看所有产品#xff0c;然后在右上角选择排序方式为Z到A#xff0c;然后向下滑动找到Workstation…
目录
一、获取VMware安装包 1、官网获取
1首先先进入官网官网首页是下面这样 2接着点击产品选项 3进入后点击查看所有产品然后在右上角选择排序方式为Z到A然后向下滑动找到Workstation Pro然后点击进去
4然后点击下载试用版进行进入下载页面进行下载 5点击 DOWNLOAD NOW 进行下载 2、从资料获取
二、安装VMware 1点击下一步 2勾选我接受许可协议中的条款并点击下一步 3勾选就按默认的勾选就ok安装位置选一个自己需要安装的位置然后点击下一步 4这里的勾选根据自己的需要进行勾选我这边是取消全部的勾选并点击下一步 5按默认的勾选就行并点击下一步 6点击安装等待安装完成 7安装完成后运行VMware 8输入密钥MC60H-DWHD5-H80U9-6V85M-8280D并点击继续 9点击完成 10点击完成后的界面如下
三、下载Ubuntu镜像文件 1、官网下载 2、从资料获取
四、开始配置Hadoop环境 1首先打开安装好的VMware并点击创建新的虚拟机 2 出现下面界面点击下一步默认勾选的就ok 3勾选稍后安装操作系统并点击下一步 4然后选择并配置好下图的配置并点击下一步 5编辑自己想要的虚拟机名称并选择位置然后点击下一步 6磁盘空间自行分配本人分配40G勾选将虚拟磁盘存储为单个文件然后点击下一步 7点击自定义硬件 8内存分配2048MB内存根据需要自行分配最少1024MB然后选择 新 CD/DVD勾选使用 ISO 映像文件之前下在好的文件然后关闭
编辑 9点击完成之后出现下面界面点击开启此虚拟机 10按下Enter键 11选择自己需要的语言后并点击安装 Ubuntu 编辑 12选择默认勾选就可以然后点击继续 13默认勾选就行然后点击继续 14默认勾选就ok点击现在安装 15点击继续 16点击继续 17输入自己需要的姓名和密码并勾选自动登录然后点击继续会出现以下界面等待这个过程完成 18按住 ctrlaltt 打开终端窗口输入如下命令创建新用户 hadoop : 19 输入下面的命令为创建的用户 hadoop 设置密码 hadoop这里密码可自己设置 20使用下面的命令设置密码可以简单设置为 hadoop 21为了方便部署使用下面命令为 hadoop 用添加管理员权限 22注销当前用户注销位置在右上角那使用刚才创建的用户登录 23登录进去后打开命令窗口首先使用下面命令对软件进行更新 24使用下面命令安装 openssh -server 25ssh每次登录还是需要密码。我们使用下面这些命令配置成无密码登录 26安装JAVA 环境 27安装 Hadoop 28Hadoop 伪分布式配置 本博客主要是为了学校课程”大数据与云计算“需要安装Hadoop而写希望这篇博客对各位阅读这篇博客的人有所帮助。废话不多说下面直接开始配置教程。
一、获取VMware安装包 VMware获取方法有很多种这里我准备了官网获取和从我准备的资料中获取。 1、官网获取
1首先先进入官网官网首页是下面这样 2接着点击产品选项 3进入后点击查看所有产品然后在右上角选择排序方式为Z到A然后向下滑动找到Workstation Pro然后点击进去 4然后点击下载试用版进行进入下载页面进行下载 5点击 DOWNLOAD NOW 进行下载 2、从资料获取 阿里云盘https://www.aliyundrive.com/s/nVT1oCtk6rC
提取码4pu8
二、安装VMware 点击下载好的VMware安装包进行安装。 1点击下一步 2勾选我接受许可协议中的条款并点击下一步 3勾选就按默认的勾选就ok安装位置选一个自己需要安装的位置然后点击下一步 4这里的勾选根据自己的需要进行勾选我这边是取消全部的勾选并点击下一步 5按默认的勾选就行并点击下一步 6点击安装等待安装完成 7安装完成后运行VMware 8输入密钥MC60H-DWHD5-H80U9-6V85M-8280D并点击继续 9点击完成 10点击完成后的界面如下 三、下载Ubuntu镜像文件 1、官网下载 官网Download Ubuntu Desktop | Download | Ubuntu 官网界面如下 1点击右下角的 Download 22.03.3 进行下载LTS是长期支持版本选择这个版本并等待下载完成 2、从资料获取 阿里云盘https://www.aliyundrive.com/s/nVT1oCtk6rC 提取码4pu8
四、开始配置Hadoop环境 1首先打开安装好的VMware并点击创建新的虚拟机 2 出现下面界面点击下一步默认勾选的就ok 3勾选稍后安装操作系统并点击下一步 4然后选择并配置好下图的配置并点击下一步 5编辑自己想要的虚拟机名称并选择位置然后点击下一步 6磁盘空间自行分配本人分配40G勾选将虚拟磁盘存储为单个文件然后点击下一步 7点击自定义硬件 8内存分配2048MB内存根据需要自行分配最少1024MB然后选择 新 CD/DVD勾选使用 ISO 映像文件之前下在好的文件然后关闭 9点击完成之后出现下面界面点击开启此虚拟机 10按下Enter键 11选择自己需要的语言后并点击安装 Ubuntu 12选择默认勾选就可以然后点击继续 13默认勾选就行然后点击继续 14默认勾选就ok点击现在安装 15点击继续 16点击继续 17输入自己需要的姓名和密码并勾选自动登录然后点击继续会出现以下界面等待这个过程完成 18按住 ctrlaltt 打开终端窗口输入如下命令创建新用户 hadoop :
sudo useradd –m hadoop –s /bin/bash注这里的密码是我们创建的用户密码我这里创建的是 blue 用户 19 输入下面的命令为创建的用户 hadoop 设置密码 hadoop这里密码可自己设置
sudo passwd hadoop 20使用下面的命令设置密码可以简单设置为 hadoop
sudo passwd hadoop注 1. 这里输入的密码是不可见的直接输入就可以 2.如果出现 无效密码 密码至少 8 个字符只需要把之前设置的密码重新输入即可 21为了方便部署使用下面命令为 hadoop 用添加管理员权限
sudo adduser hadoop sudo 22注销当前用户注销位置在右上角那使用刚才创建的用户登录 选择刚才我们创建的用户这里为 hadoop 输入为用户 hadoop 设置的密码登录进去 23登录进去后打开命令窗口首先使用下面命令对软件进行更新
sudo apt-get install 24使用下面命令安装 openssh -server
sudo apt-get install openssh-server注如果出现 您希望继续执行吗[Y/n] 输入 Y 并按 Enter 25ssh每次登录还是需要密码。我们使用下面这些命令配置成无密码登录 首先使用下面命令实现 ssh 首次登录
ssh localhost注 1.选择 yes 2.密码输入我们创建 hadoop 设置的密码 使用下面命令退出刚才登录的 ssh回到我们原先的终端窗口
exit 使用下面命令进入 ssh 目录里
cd ~/.ssh/ 利用 ssh-keygen 生成密钥
ssh-keygen –t rsa #会有提示按回车 利用下面命令将密码加入到授权中此时再使用 ssh localhost 命令就不用登录密码
cat ./id_rsa.pub ./authorized_keys #加入授权 26安装JAVA 环境 使用下面命令安装 jdk
sudo apt-get install openjdk-8-jdk 使用下面命令查看Java版本看看是否安装成功
java -version使用下面命令进入文件并配置 JAVA_HOME
gedit ~/.bashrc
export JAVA_HOME/usr/lib/jvm/java-8-openjdk-amd64
# 左右不能有空格 注修改后记得点击保存然后点击关闭 使用下面命令使上面编辑的环境变量生效
source ~/.bashrc 使用下面的命令看我们设置的环境变量是否生效
echo $JAVA_HOME 27安装 Hadoop Hadoop的安装包可以去官网安装但是由于官网的下载速度不行这里提供一个镜像网站进行下载Hadoop。 镜像网址Index of /apache/hadoop (tsinghua.edu.cn) 进入此网站后选择 common/ 然后选择自己需要的版本进行下载但注意选择扩展名为 .tar.gz 这个格式的这是编译好的。我这里下载的版本是 hadoop-2.10.2.tar.gz 下载完成后使用下面命令进行解压操作将原先的命令窗口关闭再打开然后输入下面命令
sudo tar -zxf ~/下载/hadoop-2.10.2.tar.gz -C /usr/local # 解压到/usr/local中
# 版本是自己下载的对于版本我这里是 hadoop-2.10.2 注 1.切换 中\英文 的方式为 super space windowswin 空格 先使用下面命令进入文件夹必须在使用命令将文件夹改名前使用此命令
cd /usr/local/使用下面的命令将文件夹名改为 hadoop
sudo mv ./hadoop-2.10.2/ ./hadoop # 将文件夹名改为hadoop 使用下面命令修改文件权限
sudo chown -R hadoop:hadoop ./hadoop # 修改文件权限先使用下面命令进入到hadoop 文件夹
cd /usr/local/hadoop 然后用如下命令查看我们解压的Hadoop是否可用
./bin/hadoop version28Hadoop 伪分布式配置 Hadoop 伪分布式配置需要修改core-site.xml和hdfs-site.xml配置文件。先使用下面命令进入到hadoop 文件夹
cd /usr/local/hadoop 使用下面命令对core-site.xml文件进行配置
gedit ./etc/hadoop/core-site.xml 利用下面代码进行配置core-site.xml文件注意点击保存
configurationpropertynamehadoop.tmp.dir/namevaluefile:/usr/local/hadoop/tmp/valuedescriptionAbase for other temporary directories./description/propertypropertynamefs.defaultFS/namevaluehdfs://localhost:9000/value/property
/configuration使用下面命令对hdfs-site.xml文件进行配置
gedit ./etc/hadoop/hdfs-site.xml 利用下面代码进行配置hdfs-site.xml文件注意点击保存
configurationpropertynamedfs.replication/namevalue1/value/propertypropertynamedfs.namenode.name.dir/namevaluefile:/usr/local/hadoop/tmp/dfs/name/value/propertypropertynamedfs.datanode.data.dir/namevaluefile:/usr/local/hadoop/tmp/dfs/data/value/property
/configuration配置完成后执行 NameNode 的格式化
./bin/hdfs namenode -format 接着使用下面命令开启 NameNode 和 DataNode 守护进程
./sbin/start-dfs.sh
jps # 判断是否成功启动 然后在浏览器输入下面网址访问 Web 界面 http://localhost:50070 注 Hadoop 3.x 起启动端口变成了9870而不是50070.我下载的 Hadoop 2.x故用端口 50070 至此配置完成各位观看老爷感觉不错的话能留下一个小小的点赞不过分吗同时也希望各位生活愉快、事事顺心。
