当前位置: 首页 > news >正文

购买域名后 可以做网站么网上seo研究

购买域名后 可以做网站么,网上seo研究,济南医院网站建设服务公司,适合学生做的网站类型Job那块的断点代码截图省略,直接进入切片逻辑 参考:Hadoop3:MapReduce源码解读之Map阶段的Job任务提交流程(1) 6、CombineFileInputFormat原理解析 类的继承关系 与TextInputFormat切片机制的区别 框架默认的TextI…

Job那块的断点代码截图省略,直接进入切片逻辑
参考:Hadoop3:MapReduce源码解读之Map阶段的Job任务提交流程(1)

6、CombineFileInputFormat原理解析

类的继承关系
在这里插入图片描述
TextInputFormat切片机制的区别

框架默认的TextInputFormat切片机制是对任务按文件规划切片,不管文件多小,都会是一个单独的切片,都会交给一个MapTask,这样如果有大量小文件,就会产生大量的MapTask,处理效率极其低下。
CombineTextInputFormat用于小文件过多的场景,它可以将多个小文件从逻辑上规划到一个切片中,这样,多个小文件就可以交给一个MapTask处理。

所以,这个切片机制是针对处理大量小文件的,效率比TextInputFormat更高。

切片过程说明
生成切片过程包括:虚拟存储过程和切片过程二部分。
在这里插入图片描述
注意
当剩余数据大小超过设置的最大值且不大于最大值2倍,此时将文件均分成2个虚拟存储块(防止出现太小切片)。
例如setMaxInputSplitSize值为4M,输入文件大小为8.02M,则先逻辑上分成一个4M。剩余的大小为4.02M,如果按照4M逻辑划分,就会出现0.02M的小的虚拟存储文件,所以将剩余的4.02M文件切分成(2.01M和2.01M)两个文件。

案例

准备4个文件
在这里插入图片描述
依然用wordcount案例进行演练
指定文件路径和切片类CombineFileInputFormat

		// 如果不设置InputFormat,它默认用的是TextInputFormat.classjob.setInputFormatClass(CombineTextInputFormat.class);//虚拟存储切片最大值设置4mCombineTextInputFormat.setMaxInputSplitSize(job, 4194304);

在这里插入图片描述

查看执行日志:
number of splits:3
在这里插入图片描述
所以,对应的MapTask线程数量就是3个,Reducer线程数是1个。

http://www.tj-hxxt.cn/news/41360.html

相关文章:

  • 银川网站建设哪家好网络营销推广公司名称
  • wordpress 做网站福州seo
  • 网站开发企业培训心得总结seo自学教程推荐
  • 深圳公司做网站凡科网小程序
  • 做文字的网站百度网站提交了多久收录
  • 杭州网站关键词2021百度最新收录方法
  • 武汉培训网站建设线上营销推广
  • 手表网站 云网站收录查询工具
  • 电子商务网站的类型搜索优化是什么意思
  • 网站已备案添加新域名市场调研分析报告
  • 济南网站建设外包公司哪家好网络营销成功的原因
  • 农业网站开发简单的网页设计
  • 麦当劳订餐网站 是谁做的网站页面seo
  • 怎么利用网站做cpa推广苏州关键词优化排名推广
  • 沈阳网站建设哪家便宜班级优化大师下载安装
  • 靠谱网站建设公司报价哈尔滨seo推广
  • 做网站有没有前途重庆百度seo整站优化
  • 展览设计网站有哪些郑州seo排名哪有
  • 拉了专线可以直接做网站吗网页制作源代码
  • 怎么做网站内部搜索功能怎样搭建自己的网站
  • 制作个人网站怎么做网络销售是什么工作内容
  • 企业网站明细费用百度爱采购推广怎么入驻
  • 无锡市网站设计深圳网络推广招聘
  • 湘潭自助建站系统东莞网站建设推广哪家好
  • 网上做问卷调查赚钱哪些网站好百度网址大全官方网站
  • 安阳门户网站磁力蜘蛛搜索引擎
  • 二级域名网站权重微信朋友圈广告怎么推广
  • 正规的佛山网站建设seo公司品牌哪家好
  • 可以做时时彩的网站seo推广学院
  • 淘宝seo是指百度快速seo优化