1.问题原因 主要时间消耗在往MyBatis中批量插入数据。mapper configuration是用foreach循环做的,经过项目实践发现,当表的列数较多(20+...
1.数仓分层概述 数据仓库分为三层,自下而上为:数据引入层(ODS,Operation Data Store)数据公共层(CDM,Common Data Model)数据应用...
1、map:将集合中每个元素乘以2 scala实现: java实现: 2、filter:过滤出集合中的偶数 scala实现: java实现: 3、flatMap:将行拆分为单...
1. Spark是什么 Spark,是一种通用的大数据计算框架,正如传统大数据技术Hadoop的MapReduce、Hive引擎,以及Storm流式实时计算引擎等。Spark...
Flink基础 flink的安装: 如果为单机环境,直接从flink官网下载最新的flink包解压即可。 下载地址:https://flink.apache.org/down...