JayWolf - 简书

发简信

JayWolf

27
关注
5
粉丝
39
文章
55016

字数
2

收获喜欢
0

总资产

IP属地：浙江

JayWolf

没睡醒的鱼
写了 39329 字，被 13 人关注，获得了 40 个喜欢

所有的伟大都源于一个勇敢的开始
JayWolf

HDFS存储海量视频文件
关于HDFS的基础知识看这篇文章就可以了：HDFS文件存储今天在面试的时候面试官问我HDFS如何实现视频文件的存储，给出一点实现的思路：实现存储海量视频数据，主要涉及两个因素...

没睡醒的鱼
8354 1 2

JayWolf

知识海洋中的淡水鱼
写了 8381 字，被 46 人关注，获得了 13 个喜欢
JayWolf

CoreDao
写了 0 字，被 1 人关注，获得了 0 个喜欢

葫芦哥带你走进大数据
JayWolf

（十一）安装sqoop
下载并解压 1）下载地址： http://mirrors.hust.edu.cn/apache/sqoop/1.4.6/ [http://mirrors.hust.edu.c...

226 0 0
JayWolf

（十）安装MySQL
首先导入安装包 1.解压缩：unzip mysql-libs.zip，进入cd mysql-libs，tar -zxf mysql-connector-java-5.1.27...

162 0 0
JayWolf

潇洒坤
写了 134573 字，被 763 人关注，获得了 975 个喜欢

如果我的文章中某一章节的细节部分难以理解，请给我留言。我会更新文章使读者能够有所收获。

JayWolf

（九）回顾
kafka压力测试 1.生产者压力测试[shsxt@hadoop002 kafka]$ bin/kafka-producer-perf-test.sh[http://kafk...

150 0 0
JayWolf

菜菜___
写了 50195 字，被 855 人关注，获得了 541 个喜欢

我是蔡蔡，行走在互联网的程序媛，热爱生活，乐于分享，用简单地文字分享个人所见所闻所感，欢迎指教。<br><br>QQ：1171523597<br>微信:zlcai8888<br>
JayWolf

（七）Flume搭建、组成与测试
集群规划：服务器hadoop002服务器hadoop003服务器hadoop004 Flume(采集日志)FlumeFlume 安装部署 1）将apache-flume-1...

590 0 0
JayWolf

（六）日志生成
日志启动 1）代码参数说明// 参数一：控制发送每条的延时时间，默认是0Long delay = args.length > 0 ? Long.parseLong(args[...

591 0 0
JayWolf

（八）kafka安装搭建
Kafka集群部署1）解压安装包tar -zxvf kafka_2.11-0.11.0.0.tgz -C /opt/module/2）修改解压后的文件名称mv kafka_2...

374 0 0

JayWolf

（五）ZK集群搭建
分布式集群安装部署 1．集群规划在hadoop002、hadoop003和hadoop004三个节点上部署Zookeeper。2．解压安装（1）解压Zookeeper安装包到...

527 0 1
JayWolf

Java端模拟日志数据
package com.xxxx.appclient; import java.io.UnsupportedEncodingException; import java.ut...

687 0 0
JayWolf

（四）Hadoop参数调优
HDFS参数调优hdfs-site.xml dfs.namenode.handler.count=20 * log2(Cluster Size)，比如集群规模为8台时，即20...

469 0 0
JayWolf

（三）HDFS配置多目录与支持LZO压缩
3）增加磁盘后，保证每个目录数据均衡开启数据均衡命令：bin/start-balancer.sh –threshold 10对于参数10，代表的是集群中各个节点的磁盘空间利用...

859 0 0
JayWolf

（二）Hadoop集群配置安装
集群规划 NameNode、ResourceManager、SecondaryNameNode三者分别放在三个节点上，因为都要占用内存的资源，不要重复出现在一个节点上。插一...

540 0 0

个人介绍

System.out.println("How are you?");