Flink Kafka Doris实战demo 环境: Flink 1.12 Doris 0.12 Kafka 1.0.1+kafka3.1.1 一:编译doris 参考官网...
Flink Kafka Doris实战demo 环境: Flink 1.12 Doris 0.12 Kafka 1.0.1+kafka3.1.1 一:编译doris 参考官网...
安装升级PHP https://www.centos.bz/2018/05/centos-6-7-%E5%8D%87%E7%BA%A7-php-5-6-%E5%88%B0-7...
一:flink kafka offset配置 1. setStartFromGroupOffsets(默认的): 查看partition offset 1.1、消费者组在ka...
CDH最大文件描述符 Configuring Maximum File Descriptors 一:问题: 二:解决 三:参考 CDH服务最大文件描述符修改
一:问题: zookeeper oom挂掉之后重启及选举失败 二:排查: 2.1 oom信息: 其中,FileTxnLog负责维护事务日志对外的接口,包括事务日志的写入和读取...
代码: chooseExcessReplicates 1.删除节点副本多余一个的 2.删除心跳最久的 3.删除空间最小的 oldestHeartbeat
一:hbase现有硬件资源的理论性能 1.集群容量规划公式: 优化调整,发挥硬件的最大优势; 按照默认配置, RegionSize = 10G,对应参数为hbase.hreg...
满满的干货!
轻松搞定defer和return怎么才能深刻理解defer和return之间关系呢?细读本文后将对你有很大帮助。 一、理解基本概念 go函数中return不是原子操作,在编译器中分解为两个部分:返回值赋值和...
怎么才能深刻理解defer和return之间关系呢?细读本文后将对你有很大帮助。 一、理解基本概念 go函数中return不是原子操作,在编译器中分解为两个部分:返回值赋值和...
没解决,后面就没去搞这个了
flink-cdh-parcel测试安装先上flink-cdh-parcel测试安装效果图: 下载地址:https://archive.cloudera.com/csa/1.0.0.0 一:将FLINK-1.9.0...
(1)基础知识 dlbook_cn 中文翻译版https://github.com/exacity/deeplearningbook-chinese 英文在线...
一、各数据类型内存布局 Sizeof(uint8) = 1 字节 = 8byte Sizeof(rune) = 4 Sizeof(int64) = 8 Sizeof(flo...
HBase集群平滑迁移步骤 测试环境 CDH版本HBASE版本测试源集群5.15.11.2.0测试目标集群6.2.02.1.0 线上迁移环境 CDH版本HBASE版本线上源集...
HBase跨集群迁移调研方案回顾 迁移目的 HBase跨集群平滑迁移 方案 方案一 方案二 操作命令 snapshot replication 优缺点 最终方案 CDH如何支...
背景: 如果作业由多个MR任务完成,则必然经过多次完整的Map–shuffer–Reduce,中间节点的数据多次写入HDFS,浪费IO读写。(可以将HDFS理解为多个任务之间...
一、Zookeeper备份与迁移恢复 版本:3.4.5 目录:/var/lib/zookeeper 容量:namenode1(2543M)、namenode2(2515M)、...
一、任务清单(一) 由于大量的MR任务会造成系统盘负载100%util,使用iotop分析主要是YARN任务造成的,因此需要把YARN的数据目录/yarn/nm迁移到独立磁盘...