[hadoop全分布部署]安装Hadoop、配置Hadoop 配置文件②

👨‍🎓👨‍🎓博主：发量不足

个人简介：耐心，自信来源于你强大的思想和知识基础！！

📑📑本期更新内容：安装Hadoop、配置Hadoop 配置文件②🔥🔥🔥

📑📑下篇文章预告：安装Hadoop、配置Hadoop 配置文件③🔥🔥🔥

 

目录

一、配置 core-site.xml 文件参数

二、配置 mapred-site.xml  （Mapreduce参数）

 三、配置 yarn-site.xml

---

 

一、配置 core-site.xml 文件参数

（1） vi core-site.xml  （集群全局参数）

（2） 在文件中和一对标签之间追加以下配置信息      

  
                fs.defaultFS
                hdfs://192.168.196.101:9000
        
        
                io.file.buffer.size
                131072
        
        
                hadoop.tmp.dir
                file:/opt/module/hadoop/tmp
        

 

 

注：IP地址是master的

二、配置 mapred-site.xml  （Mapreduce参数）

（1） cp mapred-site.xml.template mapred-site.xml

（2）  vi mapred-site.xml

（3）  在文件中和一对标签之间追加以下配置信息       

 
                mapreduce.framework.name
                yarn
        
        
                mapreduce.jobhistory.address
                master:10020
        
        
                mapreduce.jobhistory.webapp.address
                master:19888
        

 

 

 三、配置 yarn-site.xml

（1） 集群资源管理系统参数

          vi yarn-site.xml  

（2） 在文件中和一对标签之间追加以下配置信息       

 
                yarn.resourcemanager.address
                master:8032
        
        
                yarn.resourcemanager.scheduler.address
                master:8030
        
        
                yarn.resourcemanager.resource-tracker.address
                master:8031
        
        
                yarn.resourcemanager.admin.address
                master:8033
        
        
                yarn.resourcemanager.webapp.address
                master:8088
        
        
                yarn.nodemanager.aux-services
                mapreduce_shuffle
        
        
                yarn.nodemanager.aux-services.mapreduce.shuffle.class
                org.apache.hadoop.mapred.ShuffleHandler
        

 

 

本网站所收集的部分公开资料来源于AI生成和互联网，转载的目的在于传递更多信息及用于网络分享，并不代表本站赞同其观点和对其真实性负责，也不构成任何其他建议。