本文詳細介紹如何在centos系統上配置hdfs網絡，涵蓋靜態IP地址設置、網絡接口配置以及hadoop配置文件修改等關鍵步驟。
第一步：配置靜態IP地址
首先，為每個CentOS節點配置靜態IP地址。編輯網絡配置文件：
sudo vi /etc/sysconfig/network-scripts/ifcfg-ens33
(注意：ens33 可能因系統而異，請替換為你的網絡接口名稱。) 在文件中設置以下參數：
- BOOTPROTO=Static (使用靜態IP)
- IPADDR= (你的靜態IP地址)
- NETMASK= (子網掩碼)
- gateway= (網關地址)
- DNS1= (首選DNS服務器地址)
- DNS2= (備選DNS服務器地址，可選)
- ONBOOT=yes (系統啟動時自動啟用網絡)
例如：
DEVICE=ens33 BOOTPROTO=static IPADDR=192.168.1.100 NETMASK=255.255.255.0 GATEWAY=192.168.1.1 DNS1=8.8.8.8 DNS2=8.8.4.4 ONBOOT=yes
保存并重啟網絡服務：
sudo systemctl restart network
第二步：主機名和網絡解析
確保每個節點的主機名正確且在網絡中可解析。使用以下命令設置主機名（將hadoop1替換為你的主機名）：
hostnamectl set-hostname hadoop1
第三步：Hadoop網絡配置
修改Hadoop配置文件 core-site.xml 和 hdfs-site.xml。
core-site.xml:
<configuration> <property> <name>fs.defaultFS</name> <value>hdfs://namenode:9000</value> </property> </configuration>
(將namenode替換為你的NameNode主機名)
hdfs-site.xml:
<configuration> <property> <name>dfs.replication</name> <value>1</value> </property> <property> <name>dfs.namenode.name.dir</name> <value>/path/to/namenode/dir</value> </property> <property> <name>dfs.datanode.data.dir</name> <value>/path/to/datanode/dir</value> </property> </configuration>
(將 /path/to/namenode/dir 和 /path/to/datanode/dir 替換為NameNode和DataNode的數據存儲目錄)
第四步：網絡連接驗證
使用 ping 命令驗證網絡連接：
ping www.baidu.com
第五步：啟動HDFS
在主節點(master)上啟動HDFS：
cd /path/to/hadoop/sbin ./start-dfs.sh
在從節點(slave)上，同步Hadoop配置：
scp -r /path/to/hadoop/etc/hadoop slave1:/path/to/slave1/etc/hadoop scp -r /path/to/hadoop/etc/hadoop slave2:/path/to/slave2/etc/hadoop
(將 slave1, slave2 替換為你的從節點主機名，/path/to/slave1/etc/hadoop 和 /path/to/slave2/etc/hadoop 替換為從節點上Hadoop配置文件的路徑)
然后在每個從節點上啟動DataNode：
cd /path/to/hadoop/sbin ./start-datanode.sh
完成以上步驟后，你的HDFS網絡配置應該就完成了。 如有問題，請檢查網絡配置文件和Hadoop配置是否正確，并確保所有節點的配置一致。 請根據你的實際環境調整路徑和主機名。
