简介 Spark是基于内存计算的开源分布式大数据计算框架。为了更好、更快地开发Spark应用程序，开发者不仅要掌握Spark的理论基础和实现原理，更需要掌握Spark应用程序...
发简信
IP属地：广东
-
Spark应用程序调试方法详解 -
博主写得很棒，清晰易懂！
Spark DataFrame中rollup和cube使用
我们平时在做报表的时候，经常会有各种分维度的汇总计算，在spark中我们最常用的就是groupBy操作，groupBy就是按照给定的字段名分组，后面接sum、count、av...
-
Spark DataFrame中rollup和cube使用
我们平时在做报表的时候，经常会有各种分维度的汇总计算，在spark中我们最常用的就是groupBy操作，groupBy就是按照给定的字段名分组，后面接sum、count、av...
-
Scala 学习笔记
Scala 学习笔记 1.函数式编程 函数式编程：函数式编程把函数当作一等公民，充分利用函数，支持函数的多种使用方式。在scala中，函数可以像变量一样，既可以作为函数的参数...
-
Spark Repartition 使用
看到一些同学的Spark代码中包含了很多repartition的操作，有一些不是很合理，非但没有增加处理的效率，反而降低了性能。这里做一个介绍。 repartition 从字...
-
理解Spark中Job-Stage-Task之间的关系Spark-Job-Stage-Task之间的关系 基本概念 在开始之前需要先了解Spark中Application，Job，Stage等基本概念，官方给出的解释如下表： J...
-
很赞！行文流畅很过瘾
Fake data的使用和产生 - Python篇
什么是Fake data Fake data顾名思义假数据，是在真实产品数据无法使用的情况下，产生地接近于产品环境的数据，多用于开发和测试。 Fake data的使用场景 有...
-
Fake data的使用和产生 - Python篇
什么是Fake data Fake data顾名思义假数据，是在真实产品数据无法使用的情况下，产生地接近于产品环境的数据，多用于开发和测试。 Fake data的使用场景 有...
-
补充：一定要把 header 敲全，才会出现代码片段”HEADER“的提示
vscode snippets配置python头部注释
首先点击右下角的管理（齿轮形状的），选择其中的用户代码片段 选择现有的python代码片段python.json 然后添加以下内容 使用方法：在代码的头部输入header按回...
-
vscode snippets配置python头部注释首先点击右下角的管理（齿轮形状的），选择其中的用户代码片段 选择现有的python代码片段python.json 然后添加以下内容 使用方法：在代码的头部输入header按回...
-
【二叉树遍历】leetcode -- 127 最大路径和
资源汇总 链接[https://leetcode-cn.com/problems/binary-tree-maximum-path-sum/]画二叉树示意图网站[http:/...
-
实现的代码可读性很高，赞👍🏻
python实现一个简易hashmap
python实现一个简易hashmap,不严谨、有问题之处请多多指出。。 近日把数据结构翻出来看看，发现自己这方面的知识很欠缺，算是自己的记录，也希望给正在学习数据结构的老铁...
-
2021-08-10 Alibaba笔试
题意是给定一个数字n，再给定一个数组arr，求arr的子序列和刚好等于n，多组输入，能满足则打印"Yes"，否则打印"No"输入样例： 输出样例： 笔试入迷了写错循环条件，防...
