作为公司的平台部门，需要给各个业务线提供平台的服务，那么如何建设一个满足各种需求的公司平台级OLAP分析服务呢。首先，一个开源项目在公司真正落地...
投稿
收录了19篇文章 · 38人关注
-
Apache Kylin在美团数十亿数据OLAP场景下的实践
-
深度访谈：华为开源数据格式CarbonData项目，实现大数据即席查询秒级响应
华为宣布开源了CarbonData项目，该项目于6月3日通过Apache社区投票，成功进入Apache孵化器。CarbonData是一种低时延查...
-
Phoenix 与Spark整合，完善大数据计算栈
本篇文章主要讲解phoenix与spark做整合，目的是将phoenix做存储，spark做计算层。这样就结合了phoenix查询速度快和spa...
-
Spark在GrowingIO数据无埋点全量采集场景下的实践本文根据2016年7月北京IBM Spark沙龙上的分享讲稿整理而成。 大家好，我是来自GrowingIO的数据工程师付旗，今天跟大家分享的是我...
-
Spark cache 和 checkpoint
checkpoint 相当于 cache的备胎;checkpoint的数据一般都会放在容错的文件系统当中，比如hdfs．一般在做checkpo...
-
Spark 数据倾斜解决思路
１．优化数据结构 ２．修改并行度 ３．对数据做采样，对数据倾斜的key增加随机的前缀． ４．局部聚合＋全局聚合 ５．ETL 6．尽量不要产生sh...
-
-
-
spark 监控--WebUi、Metrics SystemUi相关流程Spark集群启动之后，我们可以通过Web观查集群状态等信息，这一部分工作是Spark WebUi 模块实现。Servlet容器启动...
-
读完这100篇论文 就能成大数据高手作者：Anil Madan** 译者：张玉宏 文源：LinkeDin 转自：CSDN**PayPal高级工程总监Anil ...
专题公告
Spark 源码解析, 优化, 实战
{var%20f='http://v.t.sina.com.cn/share/share.php?appkey=1881139527',u=z||d.location,p=['&url=',e(u),'&title=',e(t||d.title),'&source=',e(r),'&sourceUrl=',e(l),'&content=',c||'gb2312','&pic=',e(p||'')].join('');function%20a(){if(!window.open([f,p].join(''),'mb',['toolbar=0,status=0,resizable=1,width=440,height=430,left=',(s.width-440)/2,',top=',(s.height-430)/2].join('')))u.href=[f,p].join('');};if(/Firefox/.test(navigator.userAgent))setTimeout(a,0);else%20a();})(screen,document,encodeURIComponent,'','','https://upload.jianshu.io/collections/images/257203/spark-logo-trademark.png', '推荐专题《玩转Spark》（ 分享自 @简书 ）','https://jianshuapi.com/c/fb78157f2fd3?utm_campaign=maleskine&utm_content=collection&utm_medium=reader_share&utm_source=weibo','页面编码gb2312|utf-8默认gb2312'));){kind=link}