240 发简信
IP属地:江苏
  • Linux环境准备(包含JDK,MySQLyum安装)

    虚拟机安装 虚拟机及系统安装不细说,主要针对笔者遇到的一些困难进行记录 克隆虚拟机的问题 克隆虚拟机后,出现改了IP,重启网络还是连接不上的情况...

  • MapReduce简单练习

    搭好了Hadoop环境,编写了个简单的WordCount程序,接下来,写几个MapReduce程序,看看MapReduce编程究竟怎么个用法 案...

  • Resize,w 360,h 240
    MapReduce之Shffule和YARN调度器简介

    Shuffle MapReduce执行过程中,有一个很关键的过程--shuffle shuffle过程即为在map结束,对数据进行处理、排序、分...

  • Resize,w 360,h 240
    Hadoop学习之YARN及MapReduce

    YARN YARN是Hadoop的一个资源调度框架,下面简单介绍下它的运行流程 以上是YARN的一个流程图,简单介绍 Client提交任务执行请...

  • Resize,w 360,h 240
    Hadoop环境搭建

    开始正式搭建Hadoop环境,之所以分开写,也是便于阅读及以后参考。 Hadoop环境的搭建过程中,需要配置几个XML文件,接下来简单介绍下这几...

  • Resize,w 360,h 240
    HDFS学习之Yarn

    开始学习Hadoop了,其中很重要的一块就是它的存储系统-HDFS,先学学HDFS HDFS概述 HDFS源于Google发表于2003年10月...

  • Resize,w 360,h 240
    Zookeeper环境搭建及简单练习

    之前简单介绍了Zookeeper,接下来搭建一个Zookeeper的集群环境 本集群使用三个节点,网络环境及jdk安装不再赘述,直接从环境搭建开...

  • Resize,w 360,h 240
    Zookeeper简单介绍

    Zookeeper是为了解决大型分布式系统的一系列问题而开发的一套协调服务,它将复杂且容易出错的分布一致性服务封装起来,构成了一个高效可靠的原语...

  • 大数据学习-导言

    断断续续的学了半年的大数据,只是会搭,会用,可一回头,感觉又啥都不会,从头记录一下 大数据是当前很火的一个技术方向,说白了,其实就是一系列工具的...