240 发简信
IP属地:上海
  • 如何在 Inceptor 中使用日期函数获取与转换时间

    Inceptor 日期函数之 时间获取与转换 Inceptor 可以理解成 Hive,Inceptor 的日期函数基本兼容 Hive。从哪个 S...

  • Resize,w 360,h 240
    brew upgrade引发的ssl小问题

    brew upgrade 今天手哆嗦了一下,brew upgrade打出去了,然后开始自动更新所有的包…… 过了一会需要写代码了,打开pycha...

  • 范围分区-思考

    按月分区之前的模型设计师及架构师留下的表分区为STRING型的etl_time:20181222153000(年月日时分秒)image.png ...

  • Linux小技巧:删除指定时间前的文件

    环境:centos系统 显示20分钟前的文件find /home/prestat/bills/test -type f -mmin +20 -e...

  • hive表分桶设计

    分桶字段选择 进行分桶之前需要对表的数据分布情况进行大致的分析,一般遵循的原则为,选择离散度高的字段进行分桶。可以通过收集的数据特征,如Dist...

  • Hive调优

    本文种记录的大多是开源版本hive调优方式 我也会补充TDH集群Inceptor的优化方式 面试必备技能-HiveSQL优化 Hive SQL基...

  • 数据仓库之建设

    背景篇 目前所在项目中,人员配置:项目经理(4)业务分析师报表开发工程师(2,4)etl工程师大数据开发工程师(4)人员压缩可参考括号内 分析篇...

  • Linux命令之sed

    简介篇 书中翻译sed是字符流编辑器 与常使用的交互式编辑器(如vim)不同,sed编辑器以批处理的方式来编辑文件,这比交互式编辑器快得多,可以...

  • Resize,w 360,h 240
    CentOS安装Python3 2018-12-05

    今天需要在生产环境部署两个程序,都是解析API数据的,依赖python3,所以记录下部署过程. * 第一步是查看系统环境信息 系统是centos...

个人介绍
大数据工程师,使用星环TDH构建数据仓库,希望与大家多多交流