1.处理时间处理场景 2.事件时间处理场景 注：flink版本为1.14,低版本时间函数使用方式不同
发简信
IP属地：山东
-
Linux环境下git SSH配置一、Linux环境下git SSH配置 1.配置用户名和邮箱 2.配置公钥和私钥 3.复制公钥到仓库中设置选项的get ssh 4.在自己的目录下新建一个.git-ssh.s...
-
-
hadoop3.1.3HA搭建
2.1异常分析: 失败原因: NameNode作为JournalNode的客户端发起连接请求，但是失败了，然后NameNode又向其他节点依次发起了请求都失败了，直至到了最大...
-
轻松搭建hive2.3.6 on spark2.0.0前言 由于目前发现hive3.0.0版本对tez0.92在beeline模式下出现不兼容现象,暂时未解决,还由于spark2.3对流式处理优化但是对hive离线并未有太大影响...
-
DataX3.0安装Datax3.0使用说明 原文链接：https://github.com/alibaba/DataX/blob/master/introduction.md[https://...
-
hive on tez
编译 tez 下载 apache-tez-0.9.2-src 并解压到/opt下 设置环境变量 1.环境要求 可参考官方的编译与安装步骤http://tez.apache.o...
-
hive存储和压缩格式大全
1.parquet Hive 0.10 - 0.12 Hive 0.13 and later 2.lzo 3.orc 转换成lzo或者忘lzo表里insert 4.avro ...
-
hive的comment乱码
1、进入数据库 hive中执行以下 5 条 SQL 语句 （1）修改表字段注解和表注解 （2）修改分区字段注解 （3）修改索引注解 2、修改 metastore 的连接 UR...
-
Hadoop2.7.2-hive1.2.1-lzo0.4.20一.环境准备 1. 下载、安装并编译lzo和lzop 1.安装LZO 2.安装LZOP 最好root用户下操作否则make instasll权限不够) 3.把lzop复制到/...
-
Ganglia和Flume1.7安装与部署一、flume安装 二、Ganglia安装和部署 1.安装阿里云yum源 sudo wget -O /etc/yum.repos.d/CentOS-Base.repo htt...
-
MapReduce内存调优
内存调优 Hadoop处理数据时，出现内存溢出的处理方法？（内存调优） 1、Mapper/Reducer阶段JVM内存溢出（一般都是堆） 1)JVM堆(Heap)内存溢出：堆...
-
