1. zookeeper 在 kafka 中起到什么作用 Controller 选举Controller 是一个特殊的 Broker, 其负责维护所有 Partition 的...
发简信
IP属地：上海
-
大数据面试题整理 -- 实时计算部分 -
Spark Streaming 数据清理机制
大家刚开始用Spark Streaming时，心里肯定嘀咕，对于一个7*24小时运行的数据，cache住的RDD,broadcast 系统会帮忙自己清理掉么？还是说必须自己做...
-
19 Spark Streaming中空RDD的处理
在Spark Streaming中，job不断的产生，有时候会产生一些空RDD，而基于这些空RDD生成的job大多数情况下是没必要提交到集群执行的。执行没有结果的job，就是...
-
Spark Streaming 数据产生与导入相关的内存分析
前言 我这篇文章会分几个点来描述Spark Streaming 的Receiver在内存方面的表现。 一个大致的数据接受流程 一些存储结构的介绍 哪些点可能导致内存问题，以及...
-
“领导跨级找你做事，千万要小心，不要像她给自己挖了坑”
李丽摊上了大事，本以为是自己表现的一个机会，还做着晋升的美梦呢，却不料成了埋自己的坑。 怎么回事呢？前段时间，她正在办公室加班，主管老总过来和她聊了几句，问起部门的业务情况，...
-
eclipse 配置一、简介 eclipse可谓是Java开发界的神器，基本占据了大部分的Java开发市场，而且其官方还对其他语言提供支持，如C++，Ruby，JavaScript等等。为什么使...
