Hadoop.3

  • 2020 年 11 月 11 日
  • 筆記

1、Hadoop几种运行模式?

Hadoop运行模式包括:本地模式、伪分布式模式、完全分布式模式
2、SCP命令使用

安全拷贝,可以实现服务器与服务器之间的数据拷贝
3、rsync命令使用

远程同步工具。主要用于备份和镜像。具有速度快、避免相同内容和支持符号链接的优点。
4、rsync\SCP不同

用rsync做文件的复制比scp速度快,rsync只对差异文件作更新,scp是把所有文件复制过去。

5、DataNode和NameNode进程同时只能工作一个,排查方案。

首先jps命令查看一下,问题可能是格式化的时候没有关闭DataNode,然后关闭DataNode和NameNode

然后,删除生成的data目录和logs目录,最后再重新执行格式化命令