安裝Hadoop在Linux上需要執行以下步驟:
前往Apache Hadoop官方網站(https://hadoop.apache.org/)下載最新的Hadoop版本。
或者使用以下命令從終端下載Hadoop軟件包:
wget https://downloads.apache.org/hadoop/common/hadoop-3.3.1/hadoop-3.3.1.tar.gz
tar -xzvf hadoop-3.3.1.tar.gz
~/.bashrc
文件:vim ~/.bashrc
# Hadoop Configuration
export HADOOP_HOME=/path/to/hadoop-3.3.1
export PATH=$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin
保存并退出文件。
執行以下命令以使環境變量生效:
source ~/.bashrc
cd /path/to/hadoop-3.3.1/etc/hadoop
hadoop-env.sh
文件并修改Java路徑:vim hadoop-env.sh
將以下行修改為正確的Java路徑:
export JAVA_HOME=/path/to/java
core-site.xml
文件并添加以下配置:<configuration>
<property>
<name>fs.defaultFS</name>
<value>hdfs://localhost:9000</value>
</property>
</configuration>
hdfs-site.xml
文件并添加以下配置:<configuration>
<property>
<name>dfs.replication</name>
<value>1</value>
</property>
</configuration>
hdfs namenode -format
start-dfs.sh
現在,您已經在Linux上成功安裝和啟動了Hadoop。您可以通過訪問http://localhost:9870來查看Hadoop集群的Web界面。