概述： 简述数据仓库、数据湖、数据中台的相关概念。 一、数据仓库： 1、定义： 数据仓库之父 W.H.Inmon 定义数仓： 2、数仓价值： 实现跨业务条线、跨系统的数据整...
发简信
IP属地：陕西
-
简述：数据中台、数据仓库、数据湖
-
Redis-基础知识
1、数据类型 （1）基本数据类型 （2） String 常见操作 单数据操作与多数据操作：多数据操作时mset理论上优于get，但因Redis是单线程，在多数据操作数据量极大...
-
Redis企业级场景
1、缓存预热 （1）问题排查 请求数量较高 主从之间数据吞吐量较大，数据同步操作频度较高 （2）解决方案 缓存预热就是在系统启动时，提前将相关的缓存数据加载到 Redis 中...
-
Flink Dag简述
Flink Dag 1、流程简图 2、流程简述 ① API : StreamAPI: 实时流 API BatchApI : 批处理 API ② StreamGraph: 根据...
-
Flink State Backend
State Backend 说明： 默认情况下，State 会保存在 TaskManager 的内存中，CheckPoint 会存储在 JobManager 的内存中。（也就...
-
Shell-Crontab调度任务
1、调度任务 （1）系统任务调度 说明: 系统周期性所要执行的工作，比如写缓存数据到硬盘、日志清理等; 配置文件：配置文件说明： (2) 用户任务调度 说明： 用户自定义需要...
-
Shell-Bash变量与运算符
1、Bash中变量定义的规则 说明： 变量名称，有字母，数字和下划线组成，但是不能以数字开头 在 Bash 中变量的默认类型是字符串类型，如果需要定义数值类型需要特殊声明 变...
-
Shell-编程基础
1、Shell概述 （1）Shell说明： Shell 就是命令解释器，而shell Script 是利用 shell 所写的一个程序 简单理解就是将多个指令汇集在一起，然后...
-
Kafka流程分析-生产者
Kafka 工作流程分析 1、Kafka生产过程分析 （1）写入方式 producer采用推（push）模式将消息发布到broker，每条消息都被追加（append）到分区（...
-
Flink:DataStream类型转换及常用算子说明
1、DataStream算子转换概览 2、DataStream转换算子 （1）Map [DataStream->DataStream] 说明： 一对一转换,即一条转换成另一条...
-
Part1：kafka基础知识1、kafka 名词解释 （1）消息： 消息是kafka中最基本的数据单元，主要由key 和 Value 构成，均为 byte数组。 （2）topic： Topic是用于存放...
