本文1、2、3节介绍了Spark 内存相关之识，第4节描述了常见错误类型及产生原因并给出了解决方案。 1 堆内和堆外内存规划 Executor 的内存管理建立在 JVM 的内...
发简信
IP属地：台湾
-
Spark on Yarn之Executor内存管理 -
7- Maven配置文件Scope解释
在添加依赖的时候有时候会看到有着样的写法，比平常的多了scope参数 下面来解释一下scope参数 Scope Maven中的scope有compile、test、runti...
-
Python命令行:getopt模块详解之前一直在写关于python的项目，大部分工具都想运行在命令行下面怎么办呢？自行谷歌了一下，看到有一个getopt模块官方介绍地址： https://docs.python....
-
深入 ProtoBuf - 简介
之前在网络通信和通用数据交换等应用场景中经常使用的技术是 JSON 或 XML，而在最近的开发中接触到了 Google 的 ProtoBuf。 在查阅相关资料学习 Prot...
-
进程间通信IPC (InterProcess Communication)一、进程间通信的概念 每个进程各自有不同的用户地址空间，任何一个进程的全局变量在另一个进程中都看不到，所以进程之间要交换数据必须通过内核，在内核中开辟一块缓冲区，进程1把数据...
-
深入浅出CAS
占小狼[https://www.jianshu.com/users/90ab66c248e6/latest_articles] 转载请注明原创出处，谢谢！ 前言 CAS（Co...
-
含有重复字符的字符串排列组合1. 定义 排列：从给定个数的元素中取出指定个数的元素进行排序组合：从给定个数的元素中取出指定个数的元素，不考虑排序 2. 两个的关系 排列包含了组合的过程，从给定个数的元素...
-
Mysql count(*)，count(字段)，count(1)的区别select count(*)应该是一个比较常用的语句，用来统计记录行数。 但是，慢慢地你会发现，这个语句越来越慢了，为什么呢？ count(*) 的实现方式 首先，我们来看...
-
Netty中的零拷贝
原文：http://blog.onlycatch.com/post/Netty%E4%B8%AD%E7%9A%84%E9%9B%B6%E6%8B%B7%E8%B4%9D Ne...
-
布隆过滤器（Bloom Filter）原理及Guava中的具体实现目录 引子 布隆过滤器介绍产生的契机设计思想优缺点与用途假阳性率的计算 Guava中的布隆过滤器BloomFilter类的成员属性BloomFilter的构造估计最优m值和k...
-
一个线程池中的线程异常了，那么线程池会怎么处理这个线程?之前在公众号看到有关的内容,然后晚上抽了个时间试了下.故记录下 相关知识 Executors线程池 IO密集型和CPU密集型任务的线程配置 自定义线程池执行流程 三种队列,四...
-
你真的懂wait、notify和notifyAll吗
生产者消费者模型是我们学习多线程知识的一个经典案例，一个典型的生产者消费者模型如下： 这段代码很容易引申出来两个问题：一个是wait()方法外面为什么是while循环而不是i...
-
唯一索引和普通索引的区别
大家好，我是IT修真院深圳分院第5期学员，一枚正直善良的JAVA程序员。 今天给大家分享一下，修真院官网JAVA任务1中，唯一索引和普通索引的区别。 一、背景介绍 索引用来快...
-
自然语言处理中的N-Gram模型详解
N-Gram（有时也称为N元模型）是自然语言处理中一个非常重要的概念，通常在NLP中，人们基于一定的语料库，可以利用N-Gram来预计或者评估一个句子是否合理。另外一方面，N...
-
文章推荐系统 | 二、同步业务数据
推荐阅读：文章推荐系统 | 一、推荐流程设计 在推荐系统架构中，推荐系统的数据库和业务系统的数据库是分离的，这样才能有效避免推荐系统的数据读写、计算等对业务系统的影响，所以同...
-
并发关键字volatile（重排序和内存屏障）
Java 语言中的volatile变量可以被看作是一种 “程度较轻的 synchronized”；与 synchronized 块相比，volatile 变量所需的编码较少，...
-
深入理解Synchronized实现原理
我们最初学习Java的时候，遇到多线程我们会知道synchronized，对于当时的我们来说synchronized是保证了多线程之间的同步，也成为了我们解决多线程情况的常用...
-
JavaCodeLife，孜孜而行
