【编者按】 刘斌，OneAPM后端研发工程师，拥有10多年编程经验，参与过大型金融、通信以及Android手机操作系的开发，熟悉Linux及后台开发技术。曾参与翻译过《第一本...
发简信
IP属地：北京
-
时序列数据库武斗大会之 OpenTSDB 篇 -
OpenTSDB中的Compaction
Compaction作为一个可选项，如果在配置中启用，则OpenTSDB会启动一个守护线程，在后台周期性地执行compact操作。 OpenTSDB的compact操作，其实...
-
Python语法总结Python 简明语法总结 !!! 只针对有经验开发人员 简单输入输出 输出print 10 , '十' 输入name = raw_input() python基础 数据类型...
-
Spark On YARN 集群安装部署本文展示了在之前搭建的Hadoop分布式集群的基础上如何搭建Spark分布式集群环境 一、已有环境 ubuntu 14.04hadoop 2.7.1 集群安装参考三台机器ma...
-
（基于最新的Kafka version 0.10.2 new consumer API ）想要Spark Streaming精确一次消费Topic？拿去不谢，记得点赞和分享！本文基于Spark2.1.0、Kafka 0.10.2、Scala 2.11.8版本 背景： Kafka做为一款流行的分布式发布订阅消息系统，以高吞吐、低延时、高可靠的特点著...
-
如何在 Scala 中科学地操作 collection（一）集合类型与操作在日常项目开发中，我们几乎都会用到Scala中的集合以及一些集合操作。由于 Scala 中的集合操作灵活多变，对于刚接触Scala的开发者，在选用何种集合以及使用何种集合操作...
-
【spark笔记】在idea用maven导入spark源码一、前提 最近在学习spark，所以想把spark的源码导入到idea中方便学习，开始的时候试过很多网上提供的方式折腾了好久没有成功。最后发现通过maven导入源码网络还需要...
-
Spark Streaming 1.6 流式状态管理分析
Spark 1.6发布后，官方声称流式状态管理有10倍性能提升。这篇文章会详细介绍Spark Streaming里新的流式状态管理。 关于状态管理 在流式计算中，数据是持续不...
