当前位置: 首页 > news >正文

网站建设参考网站的说明书获取排名

网站建设参考网站的说明书,获取排名,沈阳专门做网站,外包软件公司在哪里去接项目目录 1. 大数据2. Hadoop简介3. Hadoop伪分布式安装4. Hadoop启动参考 1. 大数据 大数据的定义:一种规模大到在获取、存储、管理、分析方面大大超出传统数据库软件工具能力范围的数据集合。   特征:   1.海量的数据规模   2.快速的数据流转   3.…

目录

  • 1. 大数据
  • 2. Hadoop简介
  • 3. Hadoop伪分布式安装
  • 4. Hadoop启动
  • 参考

1. 大数据

  大数据的定义:一种规模大到在获取、存储、管理、分析方面大大超出传统数据库软件工具能力范围的数据集合。
  特征:
  1.海量的数据规模
  2.快速的数据流转
  3.多样的数据类型
  4.价值密度低
  上述特征可以缩小成5个特点:大量、高速、多样、价值、真实性。

2. Hadoop简介

  Hadoop是一个由Apache软件基金会开发的分布式系统基础架构,它实现了一个分布式文件系统HDFS。HDFS具有高容错性,可以部署在价格低廉的硬件上,能提供高吞吐量来访问应用程序的数据。Hadoop的另一个核心设计就是MapReduce,MapReduce为海量的数据提供了计算。

3. Hadoop伪分布式安装

  我推荐看Hadoop官网的单点伪分布式安装,一定要完成Pseudo-Distributed Operation中的配置。
  这里我推荐使用Docker,我已经制作好了一个单点伪分布式的Hadoop镜像。拉取该镜像的命令:docker pull mengsui/single_node_hadoop:4.0
  使用该镜像运行容器的命令:docker run -d --gpus all -p 8080:8080 -p 8088:8088 -p 9870:9870 mengsui/single_node_hadoop:4.0(我在其中配置了nvidia-container-toolkit,可以使用宿主机的GPU)。
  9870是WebHDFS的端口,8088是 YARN ResourceManager Web UI的端口,8080是code-server(vscode网页版的端口)。

4. Hadoop启动

  启动命令:start-dfs.sh start-yarn.sh
  关闭命令:stop-dfs.sh stop-yarn.sh
  检查启动是否成功:jps。启动成功,在jps命令下会显示ResourceManager、DataNode、SecondaryNameNode、NameNode、NodeManager。
在这里插入图片描述
  启动完后,直接点击8088和9870端口的连接,即可进入如下界面。
在这里插入图片描述
在这里插入图片描述

参考

吴章勇 杨强著 大数据Hadoop3.X分布式处理实战

http://www.tj-hxxt.cn/news/89412.html

相关文章:

  • 做网站如何把栏目放到首页网站提交工具
  • 怎么把网站黑掉网上推销产品去什么平台
  • moodle做网站搜索引擎推广方法
  • 万网空间 wordpress抖音搜索引擎优化
  • 营销型企业网站模板深圳最新通告今天
  • 微信制作网站设计推广软文是什么意思
  • wap网站开发协议成都公司建站模板
  • 广州做礼物的网站云浮网站设计
  • 长春建站最新消息爱站工具查询
  • 衡水做wap网站多少钱关键词优化排名软件怎么样
  • 上海网站建设yuue抖音关键词排名优化软件
  • 电商总监带你做网站策划seo自学网官方
  • 网站建设有多少公司中国最新军事新闻最新消息
  • 怎么在百度提交自己的网站磁力链
  • flash网站源代码百度搜索关键词排名优化推广
  • 上海做网站好的公司有哪些西安网站设计
  • 网站建设费入预付款什么科目网络营销和直播电商专业学什么
  • 网站制作赚钱吗网络营销的案例有哪些
  • 建设银行网站201308长沙网站关键词排名公司
  • 永城市专业做网站竞价广告点击软件
  • 完整网站开发视频苏州百度推广
  • 网站开发的外文文献新闻发布会新闻通稿
  • 企业网站网络推广怎么做商丘网络推广哪家好
  • 企业网站建设经验域名备案查询系统
  • 上海创意型网站建设关键词推广营销
  • 建筑装饰和网站建设哪个好百度登录入口百度
  • 晋城网站建设网站seo修改器
  • 银川做网站哪家公司好深圳网络推广市场
  • 男女性做那个微视频网站在线收录
  • 手机商城网站设计千锋教育培训多少钱