news 2026/8/21 13:24:39

任务一-1.子任务一:基础环境准备

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
任务一-1.子任务一:基础环境准备

1.子任务一:基础环境准备(任务一)

在master(node1)上安装jdk

1.安装并配置 Java 环境

Hadoop 等分布式框架依赖 Java,需安装 JDK(推荐 JDK 8);
下载 JDK(以jdk-8u361-linux-x64.tar.gz为例,需提前从 Oracle 官网或镜像站下载);
从本地上传文件到虚拟机使用到软件有Xshell,XFTP,Filezilla,需要主机先去官网下载文件(具体配置及使用参考链接1)。

(1)上传 JDK 到root用户的/root/app 目录(需先创建目录):

# 切换root用户su- root# 确保是root用户# 假设通过 Xftp 等工具上传 JDK 到/root/appmkdirsoftwaremkdir# app放安装包,software放解压后的程序、软件

/root/app的内容情况如下图:

/root/software的内容情况如下图:

(2)解压 JDK 到software目录,更改文件夹的名称:

cd/root/apptar-zxvf jdk-8u361-linux-x64.tar.gz -C /root/software/cd/root/software/mvjdk1.8.0_162 jdk1.8

(3) 配置 Java 环境变量(root用户、/etc/profile文件 编辑.bashrc):

su- root# 确保是root用户vim/etc/profile# 末尾添加以下内容

添加:

# Java Environment# 注意路径与实际解压的一致exportJAVA_HOME=/root/software/jdk1.8.0exportPATH=$PATH:$JAVA_HOME/binexportCLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar

# 生效配置:source ~/.bashrcsource/etc/profile

(4)验证 Java 安装:

java -version# 输出JDK版本信息即成功


每个节点都需要安装JDK。
集群节点之间的免密登录

在slave1、slave2(node2、node3)上安装jdk

从master上复制jdk的安装路径到slave1、slave2上

  1. master将JDK远程复制到slave1和slave2中:
scp-r /root/software root@slave1:/root/scp-r /root/software root@slave2:/root/


2. 将master的配置文件/etc/profile分发到slave1和slave2上:

[root@master ~]# scp /etc/profile slave2:/etcprofile100%19581.0MB/s 00:00[root@master ~]# scp /etc/profile slave1:/etcprofile100%1958837.1KB/s 00:00
  1. 使环境变量立即生效(slave1、slave2)
source/etc/profile
  1. 验证(slave1、slave2)
java -version

OPENJDK去看这个文件

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/8/21 22:57:05

Realistic Vision V2.0 超写实AI图像生成完全指南

Realistic Vision V2.0 超写实AI图像生成完全指南 【免费下载链接】Realistic_Vision_V2.0 项目地址: https://ai.gitcode.com/hf_mirrors/ai-gitcode/Realistic_Vision_V2.0 Realistic Vision V2.0 是一款革命性的AI图像生成工具,专注于创建具有惊人真实感…

作者头像 李华
网站建设 2026/8/21 12:20:54

5个关键理由:为什么DotnetSpider是.NET开发者的终极爬虫框架选择

5个关键理由:为什么DotnetSpider是.NET开发者的终极爬虫框架选择 【免费下载链接】DotnetSpider 项目地址: https://gitcode.com/gh_mirrors/dot/DotnetSpider 在当今数据驱动的时代,DotnetSpider作为一款专业的.NET爬虫框架,正成为众…

作者头像 李华
网站建设 2026/8/21 22:57:21

Unity WebGL实时流媒体解决方案:5分钟实现专业级视频播放

在Unity WebGL开发中集成实时视频播放功能往往面临技术挑战,但通过本指南,您将快速掌握完整的Unity WebGL视频播放解决方案。无论您是开发安防监控系统、远程教育平台还是工业物联网应用,这套基于WebRTC技术的方案都能提供零延迟的流畅体验。…

作者头像 李华
网站建设 2026/8/21 2:35:46

Python+Vue的食品厂管理系统 Pycharm django flask

这里写目录标题项目介绍项目展示详细视频演示感兴趣的可以先收藏起来,还有大家在毕设选题(免费咨询指导选题),项目以及论文编写等相关问题都可以给我留言咨询,希望帮助更多的人技术栈文章下方名片联系我即可~解决的思路…

作者头像 李华
网站建设 2026/8/21 11:48:45

5分钟快速上手Waifu Diffusion v1.4:新手必看的终极配置指南

5分钟快速上手Waifu Diffusion v1.4:新手必看的终极配置指南 【免费下载链接】waifu-diffusion 项目地址: https://ai.gitcode.com/hf_mirrors/hakurei/waifu-diffusion 想要体验AI绘画的魅力吗?Waifu Diffusion v1.4配置指南将带你从零开始&…

作者头像 李华
网站建设 2026/8/21 20:54:13

解放双手的星穹铁道模拟宇宙智能通关指南

解放双手的星穹铁道模拟宇宙智能通关指南 【免费下载链接】Auto_Simulated_Universe 崩坏:星穹铁道 模拟宇宙自动化 (Honkai Star Rail - Auto Simulated Universe) 项目地址: https://gitcode.com/gh_mirrors/au/Auto_Simulated_Universe …

作者头像 李华