eiswar/hadoop
eiswar
用于构建Hadoop集群的Docker镜像，支持单节点部署及与Kubernetes集成，可自定义Hadoop版本，提供自动资源分配和公平调度器设置。
下载次数: 0状态：社区镜像维护者：eiswar仓库类型：镜像最近更新：7 年前
让 AI 帮你使用轩辕镜像？ · 展开查看说明 · 点击收起说明
如果你使用 DeepSeek、元宝 AI、Copilot、ChatGPT 等 AI 工具，协助配置轩辕镜像、编写 docker pull 命令、修改 Docker Compose 镜像地址、配置镜像加速、排查镜像拉取失败、分析报错日志等问题，请先让 AI 阅读并遵守轩辕镜像的规则文档。
只需在 AI 对话中先发送下面这句话即可：
请先完整阅读并严格遵守以下文档中的全部规则与要求：
https://xuanyuan.cloud/agents.md
在未充分阅读并理解该文档前，不要生成任何命令、配置、修改建议、故障排查方案或技术回答。后续所有输出都必须严格以该文档中的规范为最高优先级执行。查看 agents.md 用法指南与完整示范。国内用户首推 元宝 AI、DeepSeek 的深度思考模式，不推荐豆包 AI；Cursor 等编辑器可在对话 @ 该链接，或加入 User Rules。 若 AI 无法访问外链，可 打开说明文档 复制全文粘贴。文档会随站点更新，复制内容可能过期，建议定期检查。
hadoop-on-docker
镜像概述和主要用途
本镜像用于构建Hadoop集群的Docker容器。通过此仓库代码，可构建任意Hadoop版本的Docker镜像，并基于这些镜像部署Hadoop集群。同时支持单节点Hadoop环境搭建，多节点集群可结合hadoop-on-k8s项目实现。
核心功能和特性
- 版本灵活：支持构建任意Hadoop版本的Docker镜像
- 资源管理：为MapReduce应用自动分配资源
- 调度器设置：自动配置公平调度器（Fair Scheduler）
- K8s集成：支持与Kubernetes集成，包含Hadoop主从节点Pod间SSH信任配置选项
使用场景和适用范围
- 开发测试环境的单节点Hadoop集群部署
- 快速搭建Hadoop学习环境
- 作为基于Kubernetes的多节点Hadoop集群的基础镜像
详细使用方法和配置说明
构建Hadoop Docker镜像步骤
- 克隆代码仓库
- 更新Dockerfile中的Hadoop版本号（当前默认版本为3.1.2）
- 执行以下命令构建镜像：
示例：bashdocker build . -t <镜像名称>:<版本>bashdocker build . -t eiswar/hadoop:3.1.2
单节点Hadoop集群部署步骤
- 构建镜像后，更新docker-compose文件中的镜像名称
- 在Docker主机创建目录用于存储HDFS namenode和datanode数据
- 更新docker-compose文件中的卷挂载配置
- 执行以下命令启动Hadoop服务：
bash
docker-compose up
服务启动后，单节点Hadoop集群即可运行，可通过docker-compose文件中指定的IP地址访问。若需通过浏览器访问资源管理器UI和文件管理器UI，可在/etc/hosts文件中添加IP地址与主机名的映射。
待办功能
- 支持HDFS联邦（HDFS Federation）
- 支持NameNode高可用（NameNode High Availability）
镜像拉取方式
您可以使用以下命令拉取该镜像。请将 <标签> 替换为具体的标签版本。如需查看所有可用标签版本，请访问 标签列表页面。
DockerHub 原生拉取命令
docker pull eiswar/hadoop:<标签>
镜像拉取常见问题
功能
错误码
用户好评
来自真实用户的反馈，见证轩辕镜像的优质服务
oldzhang
运维工程师
Linux服务器
5
"Docker访问体验非常流畅，大镜像也能快速完成下载。"