当前位置: 首页 > news >正文 海南定安建设局网站医药公司网站建设方案 news 2025/10/26 18:11:27 海南定安建设局网站,医药公司网站建设方案,网站建设管理专员,湖州做网站推广的公司安装Hadoop 1#xff0c;准备环节 因为Hadoop是由java编写的#xff0c;所以需要Java的环境支持#xff0c;作为开发者我们需要安装jdk。 安装jdk的教程http://t.csdn.cn/6qJKg 下载Hadoop的安装包 Hadoop官网#xff1a;http://hadoop.apache.org/ Hadoop版本下载地…安装Hadoop 1准备环节 因为Hadoop是由java编写的所以需要Java的环境支持作为开发者我们需要安装jdk。 安装jdk的教程http://t.csdn.cn/6qJKg 下载Hadoop的安装包 Hadoop官网http://hadoop.apache.org/ Hadoop版本下载地址http://archive.apache.org/dist/hadoop/core/hadoop-3.3.1/hadoop-3.3.1.tar.gz 修改etc/hosts文件 [roothadoop ~]vi /etc/hosts 192.168.184.130 hadoop2安装环节 创建文件夹 [rootMy-Server ~]# cd /usr/local [rootMy-Server local]# mkdir hadoop存放安装包 安装包hadoop-3.3.1.tar.gz放置在/usr/local/hadoop文件夹中 [rootMy-Server local]# cd /hadoop [rootMy-Server hadoop]# ll 总用量 591004 -rw-r--r--. 1 root root 605187279 5月 16 11:11 hadoop-3.3.1.tar.gz解压 [rootMy-Server hadoop]# tar -zxvf hadoop-3.3.1.tar.gz更改环境变量 [rootMy-Server ~]# vi /etc/profile # 最后添加一下代码 export HADOOP_HOME/usr/local/hadoop-3.3.1 export PATH$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin export HDFS_NAMENODE_USERroot export HDFS_DATANODE_USERroot export HDFS_SECONDARYNAMENODE_USERroot export YARN_RESOURCEMANAGER_USERroot export YARN_NODEMANAGER_USERroot 更新环境变量 [rootMy-Server ~]# source /etc/profile验证安装 [rootMy-Server ~]# hadoop version # 有以下信息说明安装成功 Hadoop 3.3.1 Source code repository https://github.com/apache/hadoop.git -r a3b9c37a397ad4188041dd80621bdeefc46885f2 Compiled by ubuntu on 2021-06-15T05:13Z Compiled with protoc 3.7.1 From source with checksum 88a4ddb2299aca054416d6b7f81ca55 This command was run using /usr/local/hadoop/hadoop-3.3.1/share/hadoop/common/hadoop-common-3.3.1.jar修改配置文件 [rootMy-Server ~]# cd /usr/local/hadoop/hadoop-3.3.1/etc/hadoop/ [rootMy-Server hadoop]# ll 总用量 176 -rw-r--r--. 1 1000 mysql 9213 6月 15 2021 capacity-scheduler.xml -rw-r--r--. 1 1000 mysql 1335 6月 15 2021 configuration.xsl -rw-r--r--. 1 1000 mysql 2567 6月 15 2021 container-executor.cfg -rw-r--r--. 1 1000 mysql 774 6月 15 2021 core-site.xml -rw-r--r--. 1 1000 mysql 3999 6月 15 2021 hadoop-env.cmd -rw-r--r--. 1 1000 mysql 16654 6月 15 2021 hadoop-env.sh -rw-r--r--. 1 1000 mysql 3321 6月 15 2021 hadoop-metrics2.properties -rw-r--r--. 1 1000 mysql 11765 6月 15 2021 hadoop-policy.xml -rw-r--r--. 1 1000 mysql 3414 6月 15 2021 hadoop-user-functions.sh.example -rw-r--r--. 1 1000 mysql 683 6月 15 2021 hdfs-rbf-site.xml -rw-r--r--. 1 1000 mysql 775 6月 15 2021 hdfs-site.xml -rw-r--r--. 1 1000 mysql 1484 6月 15 2021 httpfs-env.sh -rw-r--r--. 1 1000 mysql 1657 6月 15 2021 httpfs-log4j.properties -rw-r--r--. 1 1000 mysql 620 6月 15 2021 httpfs-site.xml -rw-r--r--. 1 1000 mysql 3518 6月 15 2021 kms-acls.xml -rw-r--r--. 1 1000 mysql 1351 6月 15 2021 kms-env.sh -rw-r--r--. 1 1000 mysql 1860 6月 15 2021 kms-log4j.properties -rw-r--r--. 1 1000 mysql 682 6月 15 2021 kms-site.xml -rw-r--r--. 1 1000 mysql 13700 6月 15 2021 log4j.properties -rw-r--r--. 1 1000 mysql 951 6月 15 2021 mapred-env.cmd -rw-r--r--. 1 1000 mysql 1764 6月 15 2021 mapred-env.sh -rw-r--r--. 1 1000 mysql 4113 6月 15 2021 mapred-queues.xml.template -rw-r--r--. 1 1000 mysql 758 6月 15 2021 mapred-site.xml drwxr-xr-x. 2 1000 mysql 24 6月 15 2021 shellprofile.d -rw-r--r--. 1 1000 mysql 2316 6月 15 2021 ssl-client.xml.example -rw-r--r--. 1 1000 mysql 2697 6月 15 2021 ssl-server.xml.example -rw-r--r--. 1 1000 mysql 2681 6月 15 2021 user_ec_policies.xml.template -rw-r--r--. 1 1000 mysql 10 6月 15 2021 workers -rw-r--r--. 1 1000 mysql 2250 6月 15 2021 yarn-env.cmd -rw-r--r--. 1 1000 mysql 6329 6月 15 2021 yarn-env.sh -rw-r--r--. 1 1000 mysql 2591 6月 15 2021 yarnservice-log4j.properties -rw-r--r--. 1 1000 mysql 690 6月 15 2021 yarn-site.xml修改hadoop-env.sh文件 [rootMy-Server hadoop]# vi hadoop-env.sh添加jdk的地址 修改core-site.xml文件 # 查看本机名称 [rootMy-Server hadoop]# hostname My-Server [rootMy-Server hadoop]# vi core-site.xml添加如下代码 configurationpropertynamefs.defaultFS/namevaluehdfs://hadoop:9000/value/propertypropertynamehadoop.tmp.dir/namevalue/usr/local/hadoop-3.3.1/tmp/value/property /configuration修改hdfs-site.xml文件 [rootMy-Server hadoop]# vi hdfs-site.xml添加如下代码 configurationpropertynamedfs.replication/namevalue1/value/propertypropertynamedfs.http.address/namevalue192.168.184.130:50070/value/property/configuration初始化文件系统 初始化节点名称 [rootMy-Server hadoop]# hdfs namenode -format出现下以下情况说明成功 # 开启HDFS相关服务 [roothadoop hadoop]# start-dfs.sh Starting namenodes on [hadoop] 上一次登录三 5月 17 09:36:53 CST 2023pts/0 上 Starting datanodes 上一次登录三 5月 17 09:45:39 CST 2023pts/0 上 Starting secondary namenodes [hadoop] 上一次登录三 5月 17 09:45:42 CST 2023pts/0 上 [roothadoop hadoop]# jps 2514 SecondaryNameNode 2186 NameNode 2314 DataNode 2651 Jps安装时我所有到的问题 解决hadoop: Permission denied (publickey,gssapi-keyex,gssapi-with-mic,password). # 1生成公钥和私钥 [roothadoop hadoop]# ssh-keygen -t rsa # 2将公钥添加到authorized_keys文件中 [roothadoop hadoop]# cat ~/.ssh/id_rsa.pub ~/.ssh/authorized_keys # 3修改authorized_keys文件的权限 [roothadoop hadoop]# chmod 600 ~/.ssh/authorized_keys # 4将私钥添加到ssh-agent中 [roothadoop hadoop]# eval $(ssh-agent -s) [roothadoop hadoop]# ssh-add ~/.ssh/id_rsa # 5. 验证是否成功 [roothadoop hadoop]# ssh -T gitgithub.com 解决Permission denied (publickey) [roothadoop hadoop]# vim /etc/ssh/sshd_config[roothadoop hadoop]# PasswordAuthentication yes # 5. 验证是否成功 [roothadoop hadoop]# ssh -T gitgithub.com放行端口 # 放行端口号 [roothadoop hadoop]# firewall-cmd --zonepublic --add-port50070/tcp --permanent success # 刷新 [roothadoop hadoop]# firewall-cmd --reload success # 查看端口 [roothadoop hadoop]# firewall-cmd --list-ports 3306/tcp 50070/tcpwindows访问hadoophttp://IP地址:50070 文章转载自: http://www.morning.mnccq.cn.gov.cn.mnccq.cn http://www.morning.llsrg.cn.gov.cn.llsrg.cn http://www.morning.rhqn.cn.gov.cn.rhqn.cn http://www.morning.nhzxd.cn.gov.cn.nhzxd.cn http://www.morning.fbylq.cn.gov.cn.fbylq.cn http://www.morning.rlksq.cn.gov.cn.rlksq.cn http://www.morning.rbkdg.cn.gov.cn.rbkdg.cn http://www.morning.bsbcp.cn.gov.cn.bsbcp.cn http://www.morning.nhlyl.cn.gov.cn.nhlyl.cn http://www.morning.mjpgl.cn.gov.cn.mjpgl.cn http://www.morning.tnjff.cn.gov.cn.tnjff.cn http://www.morning.kynf.cn.gov.cn.kynf.cn http://www.morning.spbp.cn.gov.cn.spbp.cn http://www.morning.dfqmy.cn.gov.cn.dfqmy.cn http://www.morning.nyqxy.cn.gov.cn.nyqxy.cn http://www.morning.ltzkk.cn.gov.cn.ltzkk.cn http://www.morning.rtzd.cn.gov.cn.rtzd.cn http://www.morning.czcbl.cn.gov.cn.czcbl.cn http://www.morning.dnqpq.cn.gov.cn.dnqpq.cn http://www.morning.cbpkr.cn.gov.cn.cbpkr.cn http://www.morning.fhcwm.cn.gov.cn.fhcwm.cn http://www.morning.mdmxf.cn.gov.cn.mdmxf.cn http://www.morning.nbqwr.cn.gov.cn.nbqwr.cn http://www.morning.fmqng.cn.gov.cn.fmqng.cn http://www.morning.smqjl.cn.gov.cn.smqjl.cn http://www.morning.xxlz.cn.gov.cn.xxlz.cn http://www.morning.wrbf.cn.gov.cn.wrbf.cn http://www.morning.qtrlh.cn.gov.cn.qtrlh.cn http://www.morning.pakistantractors.com.gov.cn.pakistantractors.com http://www.morning.xxrgt.cn.gov.cn.xxrgt.cn http://www.morning.hdrsr.cn.gov.cn.hdrsr.cn http://www.morning.nwrzf.cn.gov.cn.nwrzf.cn http://www.morning.kryn.cn.gov.cn.kryn.cn http://www.morning.lnrhk.cn.gov.cn.lnrhk.cn http://www.morning.tdgwg.cn.gov.cn.tdgwg.cn http://www.morning.yrjkz.cn.gov.cn.yrjkz.cn http://www.morning.tkflb.cn.gov.cn.tkflb.cn http://www.morning.wjwfj.cn.gov.cn.wjwfj.cn http://www.morning.ylljn.cn.gov.cn.ylljn.cn http://www.morning.qxlxs.cn.gov.cn.qxlxs.cn http://www.morning.qjmnl.cn.gov.cn.qjmnl.cn http://www.morning.rbbgh.cn.gov.cn.rbbgh.cn http://www.morning.yymlk.cn.gov.cn.yymlk.cn http://www.morning.clzly.cn.gov.cn.clzly.cn http://www.morning.qbksx.cn.gov.cn.qbksx.cn http://www.morning.sjjq.cn.gov.cn.sjjq.cn http://www.morning.qsmdd.cn.gov.cn.qsmdd.cn http://www.morning.kmlmf.cn.gov.cn.kmlmf.cn http://www.morning.fstdf.cn.gov.cn.fstdf.cn http://www.morning.qqhersx.com.gov.cn.qqhersx.com http://www.morning.xswrb.cn.gov.cn.xswrb.cn http://www.morning.kfclh.cn.gov.cn.kfclh.cn http://www.morning.hqllx.cn.gov.cn.hqllx.cn http://www.morning.qtqjx.cn.gov.cn.qtqjx.cn http://www.morning.taipinghl.cn.gov.cn.taipinghl.cn http://www.morning.fpbj.cn.gov.cn.fpbj.cn http://www.morning.kjfqf.cn.gov.cn.kjfqf.cn http://www.morning.xbmwm.cn.gov.cn.xbmwm.cn http://www.morning.yqrgq.cn.gov.cn.yqrgq.cn http://www.morning.swdnr.cn.gov.cn.swdnr.cn http://www.morning.dbrdg.cn.gov.cn.dbrdg.cn http://www.morning.rmfwh.cn.gov.cn.rmfwh.cn http://www.morning.krxzl.cn.gov.cn.krxzl.cn http://www.morning.xzsqb.cn.gov.cn.xzsqb.cn http://www.morning.rwzkp.cn.gov.cn.rwzkp.cn http://www.morning.jmlgk.cn.gov.cn.jmlgk.cn http://www.morning.pcxgj.cn.gov.cn.pcxgj.cn http://www.morning.srzhm.cn.gov.cn.srzhm.cn http://www.morning.jxgyg.cn.gov.cn.jxgyg.cn http://www.morning.stprd.cn.gov.cn.stprd.cn http://www.morning.rgkd.cn.gov.cn.rgkd.cn http://www.morning.kjksn.cn.gov.cn.kjksn.cn http://www.morning.ydflc.cn.gov.cn.ydflc.cn http://www.morning.ltywr.cn.gov.cn.ltywr.cn http://www.morning.yrpd.cn.gov.cn.yrpd.cn http://www.morning.pwdmz.cn.gov.cn.pwdmz.cn http://www.morning.jkcnq.cn.gov.cn.jkcnq.cn http://www.morning.rkmsm.cn.gov.cn.rkmsm.cn http://www.morning.xwrhk.cn.gov.cn.xwrhk.cn http://www.morning.gxfpk.cn.gov.cn.gxfpk.cn 查看全文 http://www.tj-hxxt.cn/news/251665.html 相关文章: 怎么制作网站的链接宏网站备案域名购买 网站开发开发需求文档无锡谁做网站好 做暖暖免费网站软广告经典例子 可以免费做调查问卷的网站怎么在百度上建网站 门户网站名词解释做网站图结构 大家都在哪些网站做宣传网站建设论文摘要 杭州市建设工程质量安全监督总站网站可以查企业信息的软件 好的网站怎么设计网站支付界面怎么做 用wordpress建站案例建筑工程公司注册需要什么条件 购买网站空间ftp设计徐州亿网 榆林做网站需要注意的几点网站树状型结构优化 外贸网站建设网站长春二手房 重庆建设工程施工安全网优化大师使用方法 有什么网站可以做编程题什么值得买wordpress模板 公司网站建设wordpress目录怎么制作 高端品牌建站广告设计工资高吗 请人做彩票网站多少钱威海做网站优化 网站建设的公司选择哪家好wordpress 浮窗音乐 分成型网站建设焦作百姓网免费发布信息 优酷网站建设视频教程集深圳 网站设计公司排名 西部网站管理助手 伪静态建立网站建设 西安网站建设加q479185700做西服的网站 长葛网站制作樱花16q808a 深圳网站设计深圳设计公司龙岩做网站的 网站建设公司 电话销售没什么效果学院网站整改及建设情况报告 网站标题正确书写标准梧州网站建设推荐 做网站找浩森宇特电子商务网站建设也管理 怎么创建网站页面代加工网 网站导航栏原型图怎么做wordpress文章分类插件 一流的商城网站建设中国设计网站排行榜前十名