(1.6)--2.大数据处理架构Hadoop4_Linux系统配置.pdf
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_1.gif)
![资源得分’ title=](/images/score_05.gif)
《(1.6)--2.大数据处理架构Hadoop4_Linux系统配置.pdf》由会员分享,可在线阅读,更多相关《(1.6)--2.大数据处理架构Hadoop4_Linux系统配置.pdf(15页珍藏版)》请在得力文库 - 分享文档赚钱的网站上搜索。
1、大数据技术原理与应用大数据技术原理与应用第第2 2讲讲 大数据处理架构大数据处理架构HadoopHadoop(4 4)学习目标学习目标 了解了解Hadoop由来、用途、特性由来、用途、特性 了解了解Hadoop的生态系统的生态系统 掌握掌握Hadoop的核心组成的核心组成 掌握掌握Linux系统安装方法系统安装方法 掌握掌握Linux系统配置内容和方法系统配置内容和方法 掌握掌握Hadoop集群搭建内容和方法集群搭建内容和方法 掌握掌握Hadoop集群测试方法集群测试方法教学内容教学内容 2.1 Hadoop概述概述 2.2 Hadoop生态系统生态系统 2.3 Linux系统安装系统安装 2
2、.4 Linux系统配置系统配置 2.5Hadoop集群搭建集群搭建 2.6Hadoop集群测试集群测试1.启动启动3台虚拟机,通过台虚拟机,通过MobaXtem或Linux Terminal终端登录。#su root2.配置时钟同步。配置时钟同步。#crontab-e3.配置主机名。配置主机名。(1)将HadoopMaster节点的主机名设置为master。#vim/vim/etcetc/sysconfigsysconfig/network/networkNETWORKING=yes HOSTNAME=master#hostname master#hostname master2.4 Lin
3、ux系统配置系统配置(2)将HadoopSlave1节点的主机名设置为slave1。#vim/vim/etcetc/sysconfigsysconfig/network/networkNETWORKING=yes HOSTNAME=slave1#hostname slave1#hostname slave1(3)将HadoopSlave2节点的主机名设置为slave2。#vim/vim/etcetc/sysconfigsysconfig/network/networkNETWORKING=yes HOSTNAME=slave2#hostname slave2#hostname slave22.
4、4 Linux系统配置系统配置4.配置网络环境配置网络环境#su root#ifconfig2.4 Linux系统配置系统配置4.配置网络环境配置网络环境使用setup命令重新配置网络环境。#setup#/sbin/service network restart#ifconfig2.4 Linux系统配置系统配置5.关闭防火墙关闭防火墙#setup选择【Firewall configuration】关闭防火墙6.配置配置hosts列表列表使用setup命令重新配置网络环境。#su root#vim/etc/hosts替换为192.168.142.128 master 192.168.142.1
5、29 slave1192.168.142.130 slave2#ping master#ping slave1#ping slave22.4 Linux系统配置系统配置7.免密钥登录配置免密钥登录配置免密钥登录是指从一台节点通过免密钥登录是指从一台节点通过SSH方式登录另外一台节点时,不用输入该节方式登录另外一台节点时,不用输入该节点的用户名和密码,就可以直接登录进去,点的用户名和密码,就可以直接登录进去,对其中的文件内容直接进行操作,没有任对其中的文件内容直接进行操作,没有任何校验和拦截。何校验和拦截。为什么要配置免密钥登录?搭建的搭建的 Hadoop集群是主从架构,集群是主从架构,Hado
- 配套讲稿:
如PPT文件的首页显示word图标,表示该PPT已包含配套word讲稿。双击word图标可打开word文档。
- 特殊限制:
部分文档作品中含有的国旗、国徽等图片,仅作为作品整体效果示例展示,禁止商用。设计者仅对作品中独创性部分享有著作权。
- 关 键 词:
- 1.6 数据处理 架构 Hadoop4_Linux 系统配置
![提示](https://www.deliwenku.com/images/bang_tan.gif)
限制150内