发简信
IP属地：浙江
-
-
大学是学的软件工程，研究生也是软件工程，写过大数据，玩过Java，手撕过python，写过爬虫 搞过聊天机器人。
-
Spark（四十一）数据倾斜解决方案之sample采样倾斜key进行两次join一、背景 这个方案的实现思路，跟大家解析一下：其实关键之处在于，将发生数据倾斜的key，单独拉出来，放到一个RDD中去；就用这个原本会倾斜的key RDD跟其他RDD，单独去...
-
Spark 内存管理详解Spark 作为一个基于内存的分布式计算引擎，其内存管理模块在整个系统中扮演着非常重要的角色。理解 Spark 内存管理的基本原理，有助于更好地开发 Spark 应用程序和进...
-
-
此简书用来发布Spark+AI的深夜学堂，每夜一更新！夜空中最亮的星：Spark！
-
新博客地址： <a href="https://links.jianshu.com/go?to=https%3A%2F%2Fwww.zhihu.com%2Fpeople%2Fallwefantasy" target="_blank">https://www.zhihu.com/people/allwefantasy</a>
-
Spark 2.0 Structured Streaming 分析前言 Spark 2.0 将流式计算也统一到DataFrame里去了，提出了Structured Streaming的概念，将数据源映射为一张无线长度的表，同时将流式计算的结...
-
-
Java大数据开发的那些事
-
收集与互联网、大数据相关的学习资料、文章，包括各种编程技巧，统计分析知识等等。
-
-
-
喜欢没事发发牢骚的老程序猿一枚
-
-
