装vim命令 moba的使用 Hadoop学习笔记

装vim命令 moba的使用 Hadoop学习笔记

一、安装虚拟机（CentOS）

二、修改主机名（当前虚拟机的主机名）

       1、查看当前的主机名：hostname

       2、修改主机名：vi /etc/hostname

    （1）一定要在vi的命令模式下（在编辑模式下按etc键）

    （2）编辑模式下i当前光标所在的位置

三、修改ip地址（当前虚拟机的ip地址）：vi /etc/sysconfig/network-scripts/ifcfg-ens33

       1、修改静态获取ip

       2、添加ip地址

       3、添加网关

       4、添加子网掩码

       5、添加域名解析器

四、修改ip地址与主机名的映射

        一、修改虚拟机的网络配置

        二、修改windows的网络配置

        三、虚拟机的防火墙的开关（ping通的不用关闭，ping不通需要关闭）

        1、防火墙状态的查看

        2、关闭防火墙

        3、开机防火墙不启动

               重置网络：

五、查看虚拟机当前的ip地址

        1. ifconfig -a

        2. ip addr

        从windows去ping一下虚拟机的ip地址
        能ping通，说明配置成功。

        关机命令：shutdown -h now

   六、打开moba创建的连接服务

(一) 出现以下情况

     （1）你之前ping192.168.1.100成功没有，没有这就打不开

     （2）如果你是ping192.168.1.128成功，那个这个new session就要连接192.168.1.128

     （3）如果虚拟机没有启动也是出现下面情况，请直接输入R就可刷新

(二) 我们需要在/opt下面创建两个文件夹

     （1）software：放软件的压缩包

(三) 创建software文件夹的命令：mkdir software

     （2）module：放软件解压后的文件夹

（1）切换到software文件夹下：

                   cd  /opt/software

（2）解压jdk到module文件夹中

命令：

           tar -zxvf jdk-8u212-linux-x64.tar.gz -C /opt/module/

（四）配置jdk环境变量（谨慎~~）

          1.输入vi /etc/profile

          2.Shift+g到最后一行

          3.之后esc -------》 ：wq

          4.输入：source /etc/profile

          5.输入：java -version出现

（五）配置hadoop环境变量

          (1) 输入vi /etc/profile

          (2) Shift+g到最后一行

        （3）之后esc -------》 ：wq

        （4）输入：source /etc/profile

        （5）输入：hadoop version

一、Hadoop的本地部署使用

目标1：统计一下一个词出现的次数~

1. 首先要有包含内容的文件

在/opt下面创建一个目录（文件夹）test

   命令: touch test

在/opt/test目录下面创建input目录（文件夹）和output目录（文件夹）

   命令：touch input

在/opt/test/input目录下创建包含内容的文件。（其实就是在文件中编辑文字）

   命令: touch output

2、用hadoop去执行这个文件

切换到/opt/module/hadoop-3.1.3/share/hadoop/mapreduce目录下

执行文件：hadoop jar hadoop-mapreduce-examples-3.1.3.jar wordcount /opt/tesd /opt/test/output/count.txt

命令：cat part-r-00000

t/input/ /opt/test/output/count.txt

3. 查看执行后的结果

     命令：c