240 发简信
IP属地:辽宁
  • 120
    Kafka【入门】就这一篇!

    为获得更好的阅读体验,建议您访问原文地址:传送门前言:在之前的文章里面已经了解到了「消息队列」是怎么样的一种存在(传送门),Kafka 作为当下流行的一种中间件,我们现在开始...

  • 120
    MapReduce Shuffle 和 Spark Shuffle 原理概述

    更多大数据技术干货,欢迎关注“大数据技术进阶”微信公众号。 Shuffle简介 Shuffle的本意是洗牌、混洗的意思,把一组有规则的数据尽量打乱成无规则的数据。而在MapR...

  • 120
    Spark Shuffle原理、Shuffle操作问题解决和参数调优

    目录: 1.shuffle原理1.1 mapreduce的shuffle原理1.1.1 map task端操作1.1.2 reduce task端操作 1.2 spark现在...