本文1、2、3节介绍了Spark 内存相关之识，第4节描述了常见错误类型及产生原因并给出了解决方案。 1 堆内和堆外内存规划 Executor 的内存管理建立在 JVM 的内...
发简信
IP属地：四川
-
Spark on Yarn之Executor内存管理 -
7- Maven配置文件Scope解释
在添加依赖的时候有时候会看到有着样的写法，比平常的多了scope参数 下面来解释一下scope参数 Scope Maven中的scope有compile、test、runti...
-
Python命令行:getopt模块详解之前一直在写关于python的项目，大部分工具都想运行在命令行下面怎么办呢？自行谷歌了一下，看到有一个getopt模块官方介绍地址： https://docs.python....
-
深入 ProtoBuf - 简介
之前在网络通信和通用数据交换等应用场景中经常使用的技术是 JSON 或 XML，而在最近的开发中接触到了 Google 的 ProtoBuf。 在查阅相关资料学习 Prot...
-
进程间通信IPC (InterProcess Communication)一、进程间通信的概念 每个进程各自有不同的用户地址空间，任何一个进程的全局变量在另一个进程中都看不到，所以进程之间要交换数据必须通过内核，在内核中开辟一块缓冲区，进程1把数据...
-
含有重复字符的字符串排列组合1. 定义 排列：从给定个数的元素中取出指定个数的元素进行排序组合：从给定个数的元素中取出指定个数的元素，不考虑排序 2. 两个的关系 排列包含了组合的过程，从给定个数的元素...
-
Mysql count(*)，count(字段)，count(1)的区别select count(*)应该是一个比较常用的语句，用来统计记录行数。 但是，慢慢地你会发现，这个语句越来越慢了，为什么呢？ count(*) 的实现方式 首先，我们来看...
-
Netty中的零拷贝
原文：http://blog.onlycatch.com/post/Netty%E4%B8%AD%E7%9A%84%E9%9B%B6%E6%8B%B7%E8%B4%9D Ne...
