虚拟机安装 虚拟机及系统安装不细说,主要针对笔者遇到的一些困难进行记录 克隆虚拟机的问题 克隆虚拟机后,出现改了IP,重启网络还是连接不上的情况...
搭好了Hadoop环境,编写了个简单的WordCount程序,接下来,写几个MapReduce程序,看看MapReduce编程究竟怎么个用法 案...
Shuffle MapReduce执行过程中,有一个很关键的过程--shuffle shuffle过程即为在map结束,对数据进行处理、排序、分...
YARN YARN是Hadoop的一个资源调度框架,下面简单介绍下它的运行流程 以上是YARN的一个流程图,简单介绍 Client提交任务执行请...
开始正式搭建Hadoop环境,之所以分开写,也是便于阅读及以后参考。 Hadoop环境的搭建过程中,需要配置几个XML文件,接下来简单介绍下这几...
开始学习Hadoop了,其中很重要的一块就是它的存储系统-HDFS,先学学HDFS HDFS概述 HDFS源于Google发表于2003年10月...
之前简单介绍了Zookeeper,接下来搭建一个Zookeeper的集群环境 本集群使用三个节点,网络环境及jdk安装不再赘述,直接从环境搭建开...
Zookeeper是为了解决大型分布式系统的一系列问题而开发的一套协调服务,它将复杂且容易出错的分布一致性服务封装起来,构成了一个高效可靠的原语...
断断续续的学了半年的大数据,只是会搭,会用,可一回头,感觉又啥都不会,从头记录一下 大数据是当前很火的一个技术方向,说白了,其实就是一系列工具的...