纯小白学习大数据第三天笔记一——hadoop运行模式

博客记录了Hadoop学习中SSH无密登录和集群配置相关内容。提到每个用户下都要单独配置无密登录,包括root用户。还介绍了集群启动步骤,如对102进行初始化,启动HDFS和查看任务运行情况等,以及启动历史服务器和配置日志聚集。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

最近看的很慢。。。因为很多内容得反复看才跟上。。。

SSH无密登录

无密登录

每个用户下都要单独配置无密登录~ root下也要

可以分发a.txt了~

集群配置

启动集群

对102进行初始化,初始化结束~

启动集群

[ariaa@hadoop102 hadoop-3.1.3]$ sbin/start-dfs.sh

hdfs外部页面——管理文件

http://hadoop102:9870/explorer.html#/

查看任务运行情况

http://hadoop103:8088/cluster

上传文件

  

数据的存储位置

启动历史服务器

配置日志聚集

应用运行完成以后,将程序运行日志信息上传到 HDFS 系统上

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值