240 发简信
IP属地:浙江
  • 120
    MapReduce/YARN 架构和任务提交过程

    MapReduce/YARN 工作原理 MRv1 的架构 执行任务的过程: client 向 JobTracker 发出一个任务请求 JobTracker 与 NameNod...

  • 120
    MapReduce Shuffle 和 Spark Shuffle 原理概述

    更多大数据技术干货,欢迎关注“大数据技术进阶”微信公众号。 Shuffle简介 Shuffle的本意是洗牌、混洗的意思,把一组有规则的数据尽量打乱成无规则的数据。而在MapR...

  • Redlock:Redis分布式锁最牛逼的实现

    普通实现 说道Redis分布式锁大部分人都会想到:setnx+lua,或者知道set key value px milliseconds nx。后一种方式的核心实现命令如下:...

  • 120
    JVM调优总结

    1.一些概念 1.1.数据类型 Java虚拟机中,数据类型可以分为两类:基本类型和引用类型。基本类型的变量保存原始值,即:他代表的值就是数值本身;而引用类型的变量保存引用值。...

  • Java中ArrayList与LinkedList的区别

    作者:nnngu GitHub:https://github.com/nnngu 博客园:http://www.cnblogs.com/nnngu 简书:https:/...

  • 120
    资本寒冬找工作注意事项,附天猫面试题(Java岗位)

    最近市场资本寒冬,很多公司都在裁员,那找新的工作需要注意什么呢。 1、提升职业技能 职业技能是找到好工作的最基础技能,也是公司愿意花钱购买你时间和服务的根本原因,职业技能的属...

  • 120
    Spark Shuffle原理、Shuffle操作问题解决和参数调优

    目录: 1.shuffle原理1.1 mapreduce的shuffle原理1.1.1 map task端操作1.1.2 reduce task端操作 1.2 spark现在...

  • 120
    (转)HBase详细概述

    本文首先简单介绍了HBase,然后重点讲述了HBase的高并发和实时处理数据 、HBase数据模型、HBase物理存储、HBase系统架构,HBase调优、HBase She...