当前位置： 首页 > news >正文 网站建设完成后 下一步做什么网站建设与维护教案 news 2025/10/31 20:45:00 网站建设完成后 下一步做什么,网站建设与维护教案,公司宣传片视频制作,seo网站导航建设技巧文章目录Spark Yarn 运行环境搭建1、解压缩文件2、修改配置环境文件3、配置历史服务器Spark Yarn 运行环境搭建 1、解压缩文件 将spark3.2.3的压缩包上传到 linux /opt/software 目录下 输入命令#xff1a; tar -zxvf spark-3.2.3-bin-hadoop3.2-scala2.13.tgz -C /opt/ 解… 文章目录Spark Yarn 运行环境搭建1、解压缩文件2、修改配置环境文件3、配置历史服务器Spark Yarn 运行环境搭建 1、解压缩文件 将spark3.2.3的压缩包上传到 linux /opt/software 目录下 输入命令 tar -zxvf spark-3.2.3-bin-hadoop3.2-scala2.13.tgz -C /opt/ 解压到opt目录下 输入命令 mv spark-3.2.3-bin-hadoop3.2-scala2.13/ spark 改名为spark 2、修改配置环境文件 1、修改 hadoop 配置文件/opt/hadoop/etc/hadoop/yarn-site.xml, 并分发 输入命令vim /opt/hadoop-3.1.3/etc/hadoop/yarn-site.xml 2、修改 conf/spark-env.sh添加 JAVA_HOME 和YARN_CONF_DIR 配置 输入命令mv spark-env.sh.template spark-env.sh 把这个文件后缀名改一下 输入命令 vim spark-env.sh 添加下面的配置 3、启动 HDFS 以及 YARN 集群 3、配置历史服务器 1、修改 spark-defaults.conf.template 文件名为 spark-defaults.conf 输入命令mv spark-defaults.conf.template spark-defaults.conf 2、修改 spark-default.conf 文件配置日志存储路径 输入命令 vim spark-defaults.conf 添加以下配置 注意需要启动 hadoop 集群HDFS 上的目录需要提前存在。 3、修改 spark-env.sh 文件, 添加日志配置 export SPARK_HISTORY_OPTS -Dspark.history.ui.port18080 -Dspark.history.fs.logDirectoryhdfs://hadoop102:9870/directory -Dspark.history.retainedApplications30参数说明 ⚫参数 1 含义WEB UI 访问的端口号为 18080 ⚫参数 2 含义指定历史服务器日志存储路径 ⚫参数 3 含义指定保存Application 历史记录的个数如果超过这个值旧的应用程序信息将被删除这个是内存中的应用数而不是页面上显示的应用数。 4、修改 spark-defaults.conf 输入命令: vim spark-defaults.conf 添加以下配置 spark.yarn.historyServer.addresshadoop102:18080 spark.history.ui.port180805、启动历史服务 输入命令 /opt/spark/sbin/start-history-server.sh 文章转载自： http://www.morning.ktnmg.cn.gov.cn.ktnmg.cn http://www.morning.dtnjr.cn.gov.cn.dtnjr.cn http://www.morning.bpmmq.cn.gov.cn.bpmmq.cn http://www.morning.kdnrp.cn.gov.cn.kdnrp.cn http://www.morning.jkcpl.cn.gov.cn.jkcpl.cn http://www.morning.yhwxn.cn.gov.cn.yhwxn.cn http://www.morning.ctrkh.cn.gov.cn.ctrkh.cn http://www.morning.ppllj.cn.gov.cn.ppllj.cn http://www.morning.nbiotank.com.gov.cn.nbiotank.com http://www.morning.nqcwz.cn.gov.cn.nqcwz.cn http://www.morning.zwgbz.cn.gov.cn.zwgbz.cn http://www.morning.rckdq.cn.gov.cn.rckdq.cn http://www.morning.ltdxq.cn.gov.cn.ltdxq.cn http://www.morning.rwzmz.cn.gov.cn.rwzmz.cn http://www.morning.sgbss.cn.gov.cn.sgbss.cn http://www.morning.wjlnz.cn.gov.cn.wjlnz.cn http://www.morning.nqfxq.cn.gov.cn.nqfxq.cn http://www.morning.xjmpg.cn.gov.cn.xjmpg.cn http://www.morning.bfsqz.cn.gov.cn.bfsqz.cn http://www.morning.qyhcg.cn.gov.cn.qyhcg.cn http://www.morning.zkpwk.cn.gov.cn.zkpwk.cn http://www.morning.xqltq.cn.gov.cn.xqltq.cn http://www.morning.rfwkn.cn.gov.cn.rfwkn.cn http://www.morning.xtrnx.cn.gov.cn.xtrnx.cn http://www.morning.ltxgk.cn.gov.cn.ltxgk.cn http://www.morning.wlxfj.cn.gov.cn.wlxfj.cn http://www.morning.gkjyg.cn.gov.cn.gkjyg.cn http://www.morning.dhdzz.cn.gov.cn.dhdzz.cn http://www.morning.lbxhy.cn.gov.cn.lbxhy.cn http://www.morning.bnqcm.cn.gov.cn.bnqcm.cn http://www.morning.rdbj.cn.gov.cn.rdbj.cn http://www.morning.wsnjn.cn.gov.cn.wsnjn.cn http://www.morning.xkyfq.cn.gov.cn.xkyfq.cn http://www.morning.qwqzk.cn.gov.cn.qwqzk.cn http://www.morning.hlxxl.cn.gov.cn.hlxxl.cn http://www.morning.dpdr.cn.gov.cn.dpdr.cn http://www.morning.lndongguan.com.gov.cn.lndongguan.com http://www.morning.tyjnr.cn.gov.cn.tyjnr.cn http://www.morning.jghty.cn.gov.cn.jghty.cn http://www.morning.nfbnl.cn.gov.cn.nfbnl.cn http://www.morning.jkwwm.cn.gov.cn.jkwwm.cn http://www.morning.hlnrj.cn.gov.cn.hlnrj.cn http://www.morning.gstmn.cn.gov.cn.gstmn.cn http://www.morning.tgydf.cn.gov.cn.tgydf.cn http://www.morning.ywxln.cn.gov.cn.ywxln.cn http://www.morning.rwzkp.cn.gov.cn.rwzkp.cn http://www.morning.shuanga.com.cn.gov.cn.shuanga.com.cn http://www.morning.rcbdn.cn.gov.cn.rcbdn.cn http://www.morning.cmfkp.cn.gov.cn.cmfkp.cn http://www.morning.dnzyx.cn.gov.cn.dnzyx.cn http://www.morning.mpszk.cn.gov.cn.mpszk.cn http://www.morning.kcsx.cn.gov.cn.kcsx.cn http://www.morning.ryysc.cn.gov.cn.ryysc.cn http://www.morning.lnfkd.cn.gov.cn.lnfkd.cn http://www.morning.mkkcr.cn.gov.cn.mkkcr.cn http://www.morning.mftdq.cn.gov.cn.mftdq.cn http://www.morning.qrwnj.cn.gov.cn.qrwnj.cn http://www.morning.xkzr.cn.gov.cn.xkzr.cn http://www.morning.hyxwh.cn.gov.cn.hyxwh.cn http://www.morning.nqypf.cn.gov.cn.nqypf.cn http://www.morning.blxlf.cn.gov.cn.blxlf.cn http://www.morning.cgntj.cn.gov.cn.cgntj.cn http://www.morning.ljllt.cn.gov.cn.ljllt.cn http://www.morning.qhnmj.cn.gov.cn.qhnmj.cn http://www.morning.yqzyp.cn.gov.cn.yqzyp.cn http://www.morning.jzxqj.cn.gov.cn.jzxqj.cn http://www.morning.sqdjn.cn.gov.cn.sqdjn.cn http://www.morning.lpzyq.cn.gov.cn.lpzyq.cn http://www.morning.pcwzb.cn.gov.cn.pcwzb.cn http://www.morning.nktgj.cn.gov.cn.nktgj.cn http://www.morning.gbybx.cn.gov.cn.gbybx.cn http://www.morning.jppb.cn.gov.cn.jppb.cn http://www.morning.fnwny.cn.gov.cn.fnwny.cn http://www.morning.fjmfq.cn.gov.cn.fjmfq.cn http://www.morning.rrcrs.cn.gov.cn.rrcrs.cn http://www.morning.tkjh.cn.gov.cn.tkjh.cn http://www.morning.wmmjw.cn.gov.cn.wmmjw.cn http://www.morning.nfks.cn.gov.cn.nfks.cn http://www.morning.gjmll.cn.gov.cn.gjmll.cn http://www.morning.sryyt.cn.gov.cn.sryyt.cn 查看全文 http://www.tj-hxxt.cn/news/266155.html 相关文章： 网站页面设计要求网站开发基本语言 湛江免费模板建站logo设计公司在线生成 公司网站后台更新怎么做网站导航地图 网站建设服务器软件医保局微网站开发 南京网站建设公司 雷仁网络建筑网站案例 做网站网页的工作怎么样个人电子邮箱 品牌营销策划网站营销型网站(易网拓) 百度为何不收录你的网站产品页网站开发团队排行榜 长沙做网站要多少钱郑州网站推广招聘 欧美风格英文网站设计企业网站 jquery 接设计单的网站网站图片一般多大 西安北郊网站建设公司东莞建站公司 网站开发常用问题wordpress维护服务器 邢台集团网站建设报价淄博网站备案公司 win2008 网站服务器网站图片悬浮代码 定制网站平台的安全设计建设银行中国建设银行 建设网站与服务器手机版网页 delphi网站开发网站赚钱 手机网站分享代码网站推广业务 辽宁建设信息网站手机网站 微信分享 个人建站教程自己做优惠券网站 建设网站的源代码的所有权网站建设我们的优势 网站建设维护协议国外域名。国内网站 创意设计网站做门户网站用什么系统 网站建设后的优势网站如何制作学校的做 做HH网站郑州电力高等专科学校招生网 安徽住房和城乡建设部网站首页建设产品信息网站 电商网站开发工作计划网站网站建设报价 wordpress建站插件做注册会员和购物的网站需要什么 营销型网站建设要多少钱用vs做购物网站下载
