对于经常使用 Spark 的人来说，如何设置 driver 或 executor 的内存大小，如何尽量减少 GC 相信不会陌生。要做好这两点，除了 Spark 知识的掌握外，...
发简信
IP属地：北京
-
JVM GC 那些事（一）- JVM 运行时内存划分 -
【实战篇】如何优雅的停止你的 Spark Streaming Application
Spark 1.3及其前的版本 你的一个 spark streaming application 已经好好运行了一段时间了，这个时候你因为某种原因要停止它。你应该怎么做？直接...
-
【容错篇】Spark Streaming的还原药水——Checkpoint一个 Streaming Application 往往需要7*24不间断的跑，所以需要有抵御意外的能力（比如机器或者系统挂掉，JVM crash等）。为了让这成为可能，Spa...
-
Intellij IDEA 一些不为人知的技巧蚂蚁金服招聘中间件开发工程师/技术专家，欢迎大家的简历哦：khotyn.huangt@alibaba-inc.com 今天又听了 Jetbrains 首席布道师 Hadi 的...
-
Mac上有哪些冷门但却逆天的软件？说逆天似乎有些标题党了，但确实Mac上有很多小众但却让人无法自拔的工具，自己平时用的多，整理了一些，希望有帮助:) 这次只分四部分：阅读类、工具类、图片类、笔记类。 还是和以...
-
『 Spark 』5. 这些年，你不能错过的 spark 学习资源
原文链接：『 Spark 』5. 这些年，你不能错过的 spark 学习资源 写在前面 本系列是综合了自己在学习spark过程中的理解记录 ＋ 对参考文章中的一些理解 ＋ 个...
-
9. Spark Streaming技术内幕 : Receiver的精妙实现和生命周期研究和思考原创文章，转载请注明:转载自听风居士博客(http://www.jianshu.com/users/4435a13863fb/timeline) Spark streamin...
-
spark streaming应用一个越跑越慢的bug题记： 这是我的第一篇技术博文，写得不好请多提意见。然后，感谢张志斌老师，毕业之前张老师帮助我解一些“神奇的bug”，现在毕业一个月，我终于自己开始解自己认为“神奇的bug”...
