Hadoop 笔记（四）运行一个程序

笨蛋程序员

已于 2022-04-11 21:57:28 修改

阅读量1.8k

点赞数

CC 4.0 BY-SA版权

分类专栏： Hadoop 文章标签： hadoop 大数据 yarn

于 2022-04-11 10:38:31 首次发布

本文详述了在Hadoop的不同模式（单机、伪分布式、完全分布式）下运行grep和wordcount程序的步骤。从配置、创建input文件、执行程序到查看结果，逐一讲解，为Hadoop学习者提供了清晰的操作指南。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

之前的几篇文章介绍了 Hadoop 安装与配置，以及 HDFS、Map Reduce 和 YARN 的体系架构。

这篇文章分别演示在不同模式下如何运行程序。

单机模式运行 grep 程序

单机模式不用做任何配置，使用本地文件系统。

如果进行了配置，运行程序就会报错。

在本地目录下创建 input 文件夹，复制一些文件到其中。

mkdir input
cp etc/hadoop/*.xml input

执行一个程序，在 share/hadoop/mapreduce 文件下有许多示例程序。要指定运行的程序，以及输入输出路径。

bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.10.1.jar grep input output 'dfs[a-z.]+'
<

200万优质内容无限畅学