当前位置: 首页 > news >正文

可以做c语言任务的网站长沙网站包年优化

可以做c语言任务的网站,长沙网站包年优化,培训网站平台怎样做,哈尔滨市建设工程信息Flink的数据流处理,是持续流模型,数据不会落地,上游和下游的Task同时启动,等待数据的到达,Flink的批处理还是用的MapReduce计算模型,先处理map端,再执行reduce端。 flink的流处理(STREAMING)&a…

Flink的数据流处理,是持续流模型,数据不会落地,上游和下游的Task同时启动,等待数据的到达,Flink的批处理还是用的MapReduce计算模型,先处理map端,再执行reduce端。

flink的流处理(STREAMING):

是持续流模型,上游和下游的task任务同时启动,持续等待数据的到达,可以处理无界流和有界流,因为数据是一条条进行处理的,但是处理有界流的时候,打印出来的结果会显示多个(最终结果)
比如文本每行都有java,一共有java20,但是会打印java 8 ,java 10,java 20,显示多个最终结果

flink的批处理(BATCH):

底层还是MapReduce的计算模型,先处理map端,再处理reduce端,只能处理有界流
不能处理无界流
, 因为执行的方式不同,MR不可能持续等待数据的到达,而是一次性批量的处理数据

代码展示如下:


import org.apache.flink.api.common.RuntimeExecutionMode;
import org.apache.flink.streaming.api.datastream.DataStream;
import org.apache.flink.streaming.api.datastream.DataStreamSource;
import org.apache.flink.streaming.api.environment.StreamExecutionEnvironment;//TODO:无界流:程序开始之后,数据量是不确定的,没有边界,程序一直持续等待数据的到达
//     有界流:就是指数据量是确定的,比如一个文件,是知道具体的大小的//todo:flink的流处理(STREAMING):是持续流模型,上游和下游的task任务同时启动,持续等待数据的到达,
// 可以处理无界流和有界流,因为数据是一条条进行处理的,但是处理有界流的时候,打印出来的结果会显示多个(最终结果)
// 比如文本每行都有java,一共有java20,但是会打印java 8 ,java 10,java 20,显示多个最终结果//todo:flink的批处理(BATCH):底层还是MapReduce的计算模型,先处理map端,再处理reduce端,只能处理有界流
// 不能处理无界流, 因为执行的方式不同,MR不可能持续等待数据的到达,而是一次性批量的处理数据public class flinkTest {public static void main(String[] args) throws Exception {//创建flink环境StreamExecutionEnvironment env = StreamExecutionEnvironment.getExecutionEnvironment();//设置并行度env.setParallelism(2);//数据从上游发送到下游的缓存时间,默认也是200ms延迟env.setBufferTimeout(200);//数据读取,无界流//nc -lk 8888DataStreamSource<String> linesDSN = env.socketTextStream("master", 8888);linesDSN.print();//        //数据读取,有界流,N是no代表无界,H是have代表有界
//           //设置为批处理的方式
//         env.setRuntimeMode(RuntimeExecutionMode.STREAMING);
//        DataStream<String> linesDSH = env.readTextFile("ScalaTest/src/main/java/data/score.txt");
//        linesDSH.print();//启动flink,execute会触发任务调度env.execute("w");}
}

http://www.shuangfujiaoyu.com/news/40386.html

相关文章:

  • 二手车网站制作上海今日头条新闻
  • WordPress好看的404潍坊百度关键词优化
  • 网站建设cms系统企业建站系统模板
  • 网站建设内容网络广告代理
  • 优化网站内容搜狗seo刷排名软件
  • 在手机上怎么做app软件百度爱采购优化软件
  • 武汉网站建设哪家好湖南平台网站建设设计
  • 做网投网站好网站服务器速度对seo有什么影响
  • html建站aso优化软件
  • 泰安网站建设优化案例报告网站seo是干什么的
  • 织梦手机网站图片百度搜一搜
  • 上海高端网站建设公营销型网站推广
  • 属于软件开发工具的是镇江网站seo
  • wordpress简化谷歌网站推广优化
  • 设计建立企业网站最佳的公司免费网站统计
  • 备案 新增网站seo优化主要工作内容
  • 客户评价网站建设郑州营销型网站建设
  • 快速迁移网站东莞做网站推广的公司
  • 新乡做网站的公司有那些全媒体广告投放平台
  • 广州知名网站推广国家中医药管理局
  • 网站制作的付款方式长沙企业网站设计
  • 虹桥做网站公司线下推广渠道和方式
  • 做跨境网站注意事项做个公司网站一般需要多少钱
  • 四川做网站设计公司价格易推广
  • wordpress页面切换绍兴百度推广优化排名
  • 建设银行的网站怎么打开网站创建公司
  • 淘客手机网站建设小程序定制
  • 深圳电子商务网站有哪些万能引流软件
  • 淘客网站开发培训谷歌seo推广
  • 加强政府网站信息建设通知网站建设技术