Hadoop Shell命令

FS Shell

调用文件系统(FS)Shell命令应使用 bin/hadoop fs <args>的形式。 所有的的FS shell命令使用URI路径作为参数。URI格式是scheme://authority/path。对HDFS文件系统，scheme是hdfs，对本地文件系统，scheme是file。其中scheme和authority参数都是可选的，如果未加指定，就会使用配置中指定的默认scheme。一个HDFS文件或目录比如*/parent/child可以表示成hdfs://namenode:namenodeport/parent/child，或者更简单的/parent/child（假设你配置文件中的默认值是namenode:namenodeport）。大多数FS Shell命令的行为和对应的Unix Shell命令类似，不同之处会在下面介绍各命令使用详情时指出。出错信息会输出到stderr，其他信息输出到stdout*。

hdfs伪分布式部署

Releases Archive中选择要部署的版本，我们以Release 3.2.2 available版本为例

参考文档：Hadoop: Setting up a Single Node Cluster.

一、部署

1.软件要求

• Java：Hadoop对Java版本有要求，具体参考Hadoop Java Versions，基本上Java8通用
• ssh

补充：组件名称大写-数字，如：SPARK-2908，表明该组件是有问题的

在Linux系统上部署Mysql

在Linux上部署Mysql的两种方式：

• rpm包部署：操作简单，适合学习的场景
• tar包部署：定制化配置，生产上一般用tar包部署

尾递归

一、概念

​ 如果一个函数中所有递归形式的调用都出现在函数的末尾，我们称这个递归函数是尾递归的。当递归调用是整个函数体中最后执行的语句且它的返回值不属于表达式的一部分时，这个递归调用就是尾递归。尾递归函数的特点是在回归过程中不用做任何操作，这个特性很重要，因为大多数现代的编译器会利用这种特点自动生成优化的代码。