今天是新年上班第二天,重要的是要罗列2024年计划、同时总结2023年。分为4个模块展开:个人习惯、工作学习提升、生活学习提升、锻炼 一、2024计划 1、个人习惯 我还是喜...
今天是新年上班第二天,重要的是要罗列2024年计划、同时总结2023年。分为4个模块展开:个人习惯、工作学习提升、生活学习提升、锻炼 一、2024计划 1、个人习惯 我还是喜...
一. 数据模型架构原则 1.1 数据仓库分层 分层的好处: 清晰数据结构; 数据血缘追踪; 减少重复开发; 数据关系条理化; 屏蔽原始数据的影响。 当前DW结构现况 1.1....
前言 在大数据计算领域,Spark已经成为了越来越流行、越来越受欢迎的计算平台之一。Spark的功能涵盖了大数据领域的离线批处理、SQL类处理、流式/实时计算、机器学习、图计...
针对5.7.3的版本,文章一定要看"注意点"部分 一、分组排序 实现如下功能:row_number()over(partition by A order by B) 1、场景...
、 目录:一、元数据1、数据字典2、数据血缘3、数据特征二、指标管理1、如何规范化定义指标三、数据模型1、我建模的方法2、理想的数仓模型设计应该具备的因素3、已经存在烟囱式开...
文章大部分内容摘录自极客数据中台课程:https://time.geekbang.org/column/article/220290 一、前言 数据开发职业规划:熟练的使用数...
原文: 更换icarus主题记录date: 2019-04-02 15:23:22 [TOC] 前言 终于把用了两年多的NexT主题换掉了, 之前喜欢这个主题是因为黑白两色显...
写在前面 这并不是一个已经转行成功的测试人员写的东西,而是作为一个小白的转行测试记录,我只对我自己写的东西负责,酌情观看,请勿当真。写这个系列不过是督促自己学习而已,并不是分...
我写错了。我改成拦截器
flume自定义拦截器,步骤详解文章还没写好,哈哈哈。先别看喔-------------------- 一、flume自定义拦截器步骤如下 1)继承接口:org.apache.flume.intercept...
文章还没写好,哈哈哈。先别看喔-------------------- 一、flume自定义拦截器步骤如下 1)继承接口:org.apache.flume.intercept...
我偷偷的写的😄
hive自定义UDTF函数,步骤讲解目录:一、继承GenericUDTF抽象类二、重写方法initialize()三、实现抽象方法process()四、实现抽象方法close()五、自定义将一行字符串转多行代码...
目录一、自定义UDF函数--计算字符串长度1、添加pom.xml文件2、自定义UDF函数,java类3、打包上传到liunx二、创建hive函数1、hive客户端,添加jar...
目录:一、继承GenericUDTF抽象类二、重写方法initialize()三、实现抽象方法process()四、实现抽象方法close()五、自定义将一行字符串转多行代码...
官方文档[https://cwiki.apache.org/confluence/display/Hive/LanguageManual+DDL#LanguageManual...
本篇文章主要摘录了4篇文章的内容,原文在文末在java中时间类主要有Date、Calendar、SimpleDateFormat,暂时只介绍 java.util.*下的时间类...
转载自:Sqoop 的基本使用[https://blog.csdn.net/m0_37809146/article/details/91127801] 目录:一、Sqoop ...
hive -e“-e”不进入hive的交互窗口执行sql语句,hive -e 后面跟hivesql字符串 hive -f“-f”执行脚本中sql语句 知道了语法,我们下面来看...
前言:每次使用UDTF函数的时候都要百度,会用但一直一知半解,今天对UDTF函数做一个总结。 目录:一、UDTF函数 explode() 讲解二、百度explode(),总会...
参考文章1:Flume 自定义 Interceptor(拦截器)[https://www.cnblogs.com/jhxxb/p/11582804.html]参考文章2:ja...