实验目的

Hadoop 运行在 Linux 系统上,因此,需要学习实践一些常用的 Linux 命令。本实验旨在熟悉常用的 Linux 操作和 Hadoop 操作,为顺利开展后续其他实验奠定基础。

实验平台

1、操作系统:win10
2、Hadoop版本:3.1.3
win10与hadoop集群位于同一局域网中。

实验步骤

1、熟悉常用的Hadoop操作

1)使用hadoop用户登录Linux系统,启动Hadoop(hadoop的安装目录为/usr/local/hadoop),为Hadoop用户在HDFS中创建用户目录/user/hadoop

cd /usr/local/hadoop
./sbin/start-dfs.sh
./bin/hdfs dfs -mkdir -p /usr/hadoop

在这里插入图片描述

2)接着在 HDFS 的目录/user/hadoop下,创建 test 文件夹,并查看文件列表

cd /usr/local/hadoop
./bin/hdfs dfs -mkdir test
./bin/hdfs dfs -ls

在这里插入图片描述
3)将 Linux 系统本地的“~/.bashrc”文件上传到 HDFS 的 test 文件夹中,并查看 test

cd /usr/local/hadoop
./bin/hdfs dfs -put ~/.bashrc test
./bin/hdfs dfs -ls test

在这里插入图片描述

4)将 HDFS 文件夹 test 复制到 Linux 系统本地文件系统的“/usr/local/hadoop”目录下。

cd /usr/local/hadoop
./bin/hdfs dfs -get test ./
GitHub 加速计划 / li / linux-dash
10.39 K
1.2 K
下载
A beautiful web dashboard for Linux
最近提交(Master分支:2 个月前 )
186a802e added ecosystem file for PM2 4 年前
5def40a3 Add host customization support for the NodeJS version 4 年前
Logo

旨在为数千万中国开发者提供一个无缝且高效的云端环境,以支持学习、使用和贡献开源项目。

更多推荐