当前位置: 首页 > news >正文

WordPress报表模板重庆百度快速优化

WordPress报表模板,重庆百度快速优化,做企业网站建设,做网站建设的前景Flink的数据流处理,是持续流模型,数据不会落地,上游和下游的Task同时启动,等待数据的到达,Flink的批处理还是用的MapReduce计算模型,先处理map端,再执行reduce端。 flink的流处理(STREAMING)&a…

Flink的数据流处理,是持续流模型,数据不会落地,上游和下游的Task同时启动,等待数据的到达,Flink的批处理还是用的MapReduce计算模型,先处理map端,再执行reduce端。

flink的流处理(STREAMING):

是持续流模型,上游和下游的task任务同时启动,持续等待数据的到达,可以处理无界流和有界流,因为数据是一条条进行处理的,但是处理有界流的时候,打印出来的结果会显示多个(最终结果)
比如文本每行都有java,一共有java20,但是会打印java 8 ,java 10,java 20,显示多个最终结果

flink的批处理(BATCH):

底层还是MapReduce的计算模型,先处理map端,再处理reduce端,只能处理有界流
不能处理无界流
, 因为执行的方式不同,MR不可能持续等待数据的到达,而是一次性批量的处理数据

代码展示如下:


import org.apache.flink.api.common.RuntimeExecutionMode;
import org.apache.flink.streaming.api.datastream.DataStream;
import org.apache.flink.streaming.api.datastream.DataStreamSource;
import org.apache.flink.streaming.api.environment.StreamExecutionEnvironment;//TODO:无界流:程序开始之后,数据量是不确定的,没有边界,程序一直持续等待数据的到达
//     有界流:就是指数据量是确定的,比如一个文件,是知道具体的大小的//todo:flink的流处理(STREAMING):是持续流模型,上游和下游的task任务同时启动,持续等待数据的到达,
// 可以处理无界流和有界流,因为数据是一条条进行处理的,但是处理有界流的时候,打印出来的结果会显示多个(最终结果)
// 比如文本每行都有java,一共有java20,但是会打印java 8 ,java 10,java 20,显示多个最终结果//todo:flink的批处理(BATCH):底层还是MapReduce的计算模型,先处理map端,再处理reduce端,只能处理有界流
// 不能处理无界流, 因为执行的方式不同,MR不可能持续等待数据的到达,而是一次性批量的处理数据public class flinkTest {public static void main(String[] args) throws Exception {//创建flink环境StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();//设置并行度env.setParallelism(2);//数据从上游发送到下游的缓存时间,默认也是200ms延迟env.setBufferTimeout(200);//数据读取,无界流//nc -lk 8888DataStreamSource<String> linesDSN = env.socketTextStream("master", 8888);linesDSN.print();//        //数据读取,有界流,N是no代表无界,H是have代表有界
//           //设置为批处理的方式
//         env.setRuntimeMode(RuntimeExecutionMode.STREAMING);
//        DataStream<String> linesDSH = env.readTextFile("ScalaTest/src/main/java/data/score.txt");
//        linesDSH.print();//启动flink,execute会触发任务调度env.execute("w");}
}

http://www.tj-hxxt.cn/news/76325.html

相关文章:

  • 广东佛山郑州百度seo排名公司
  • 怎么做网站外链网站排名优化培训课程
  • 昆明猫咪科技网站建设公司哪家网站推广好
  • 西安购物网站建设网站内容优化关键词布局
  • 做网站的快捷方式代码网络广告营销方案策划内容
  • 响应式网站建设代理如何自己建网站
  • dw做的网站怎么做后台中国突然宣布一重磅消息
  • 怎样做网站测评百度识图网站
  • 离石做网站的网络公司seo流程
  • 桃子网站武汉抖音seo搜索
  • 衡阳微信网站开发备案域名交易平台
  • 新疆人防建设网站徐州百度推广总代理
  • 5g空间大吗企业网站seo实战技巧100例
  • 企业网站开发建设网站seo推广公司靠谱吗
  • 电子公章在线制作网站google play
  • 商业网站域名后缀小时seo加盟
  • 合肥最好的网站建设公司哪家好可视化网页制作工具
  • 手机制作网站软件阿里云注册域名
  • 新手学做网站学哪些知识站长之家点击进入
  • 网站自己怎么建设国内新闻摘抄
  • 怎样做网址有自己的模板整站优化深圳
  • 网站主色调有几种优化设计三年级上册语文答案
  • 网页搜索的东西别人能知道吗google seo怎么做
  • 设计网站公司收费信息流广告推广
  • 网站关键词选取的步骤网络营销方式有哪几种
  • 499可以做网站商丘seo教程
  • qq上网站做我女朋友小说搜索风云榜排名
  • 如何给网站做seo拓客软件
  • 企业网站排名提升软件优化百度账号购买1元40个
  • 微信做购物网站怎么抽佣交换链接名词解释