论文概要 该论文是Spark团队在2018年发表的一篇基于Spark引擎之上新构建的一套Streaming api，Structured Str...
投稿
收录了18篇文章 · 7人关注
-
Structured Streaming: A Declarative API for Real-Time Applications in Apache Spark -
Flink集群部署模式根据集群的生命周期、资源隔离方式和应用程序的main()方法执行位置(client或者JobManager)可以将集群部署模式分为：Flink ...
-
Flink集群架构Flink集群架构 Flink采用Master-Slave架构，其中JobManager作为集群Master节点，主要负责任务协调和资源分配，T...
-
Flink状态管理源码分析(三)-快照策略快照策略(SnapshotStrategy) Flink的检查点机制是建立在分布式一致快照之上的，从而实现数据处理的exactly-once处理...
-
Flink系统架构简介Flink系统组成 Flink是一个分层系统，从下到上分为：系统部署层、任务运行层、API层以及基于API开发的通用库层(Libraries)。...
-
Flink DataStream API详解Flink API介绍 Flink提供了三层API，每层在简洁性和表达性之间进行了不同的权衡。 ProcessFunction是Flink提供的...
-
Flink部署Flink作为一个分布式流式计算引擎，需要计算资源才可以执行应用程序。Flink能够与目前所有通用的资源管理框架集成，比如Hadoop YARN...
-
Storm Trident 之 Trident API介绍Trident是什么 Trident是Storm上的高层次抽象，它能够在提供高吞吐量的能力同时(每秒几百万消息)，也提供了有状态的流式处理和低延...
-
Storm原理深入浅出Storm架构 Storm是一个分布式、可靠的实时计算系统。与Hadoop不同的是，它采用流式的消息处理方法，对于每条消息输入到系统中后就能被立...
-
Spark介绍和集群模式搭建Spark简介 什么是Spark？ Apache Spark是由加州伯克利分校AMP实验室开发的通用大数据处理框架。Spark提供了大数据处理的...
专题公告
数据是AI基础，泛大数据包括大数据基础技术、大数据应用技术、大数据分析技术、BI+AI、数据挖掘、机器学习、深度学习、人工智能、统计分析等。
{var%20f='http://v.t.sina.com.cn/share/share.php?appkey=1881139527',u=z||d.location,p=['&url=',e(u),'&title=',e(t||d.title),'&source=',e(r),'&sourceUrl=',e(l),'&content=',c||'gb2312','&pic=',e(p||'')].join('');function%20a(){if(!window.open([f,p].join(''),'mb',['toolbar=0,status=0,resizable=1,width=440,height=430,left=',(s.width-440)/2,',top=',(s.height-430)/2].join('')))u.href=[f,p].join('');};if(/Firefox/.test(navigator.userAgent))setTimeout(a,0);else%20a();})(screen,document,encodeURIComponent,'','','https://upload.jianshu.io/collections/images/587988/c5eeb545574d57b0d55a5936576b0123.jpg', '推荐专题《泛大数据》（ 分享自 @简书 ）','https://jianshuapi.com/c/e90a3120b6c6?utm_campaign=maleskine&utm_content=collection&utm_medium=reader_share&utm_source=weibo','页面编码gb2312|utf-8默认gb2312'));){kind=link}