好记性不如烂笔头

LOG-END-OFFSET: 分区最新消息的偏移量(该第39了)偏移量就是消费者消费到哪个消息了，kafka集群有记录的该信息。CURRENT-OFFSET: 消费者当前消费到的偏移量。主题中的消息只能被同一个组中的一个消费者消费。LAG: 消费滞后量(未消费的消息数)一个主题可以被多个消费者组消费。查看指定消费者组详细信息。一个组可以有多个消费者。查看kafka服务版本。启动kafka生产者。启动kafka消费者。

Hadoop是由Apache基金会开发的一个分布式系统基础架构，主要解决海量数据的存储和海量数据的分析计算问题。HDFS架构理解，YARN架构理解，MapReduce理解。

查看集群状态，观察NameNode，DataNode, 2NN是否符合更开始的集群搭建需求。克隆三个虚拟机，分别是：hadoop102, hadoop103, hadoop104.配置文件目录：/opt/module/hadoop-3.1.3/etc/hadoop。重启虚拟机后，检查是否配置正确，确保每一步都是正确的，再执行后面的配置。只需要在hadoop102节点上执行，只有集群第一次启动的时候执行。虚拟机，之后集群中的虚拟机可以直接使用克隆虚拟机的方式创建。如果B要访问A，在B机器上执行以上相同操作。

获取yarn restful节点和port信息。获取SecondaryNameNode节点。获取NameNode restful接口。获取ResourceManager节点。查询hdfs系统中的namenode。查看datanode的存储目录。上传本地文件到指定目录下。查看hadoop版本。

CDH 6.3.2开启kerberos认证。查看keytab文件中的账户信息。Kerberos 命令使用。导出用户keytab文件。使用keytab文件登录。登录到后台之后，输入。