
IP属地:上海
从事了多年的大数据开发,不甘心一直做小罗罗,希望在更上一层。在此立下复习目录,分享多年的大数据开发和数仓经验,实现目标,共勉 Flink开发(1...
如果有一个小时任务,但是需要明天在将昨天的数据运行一次怎么做 这里需要用到azkaban的condition过滤 定义条件脚本:write_to...
本次安装Airflow版本为1.10,其需要依赖Python3.6和DB,本次选择的DB为Mysql mysql安装 参考文档: [https:...
需求: 统计用户各个维度信息,放入json串中 参考mysql json文档(注意: json 类型时mysql5.7以上才出来,以前可以用te...
使用: 如果想监控目录,做相应逻辑处理(不想大费周章),相信这会是你很好的选择 **需求: 实现linux 目录监控,将新增的文件放入处理引擎中...
**运行环境: Python 2.7.5 , linux ** 参考文档 restfulAPI: https://docs.gitlab.com...