项目中使用Flink SQL 将离线数据、流数据写入Hudi,自下而上分析写hudi的流程。hudi 版本0.10.0-patch。 HoodieWriteHandle 负责...
前言 你还在手动打包jar包,然后ftp上传到服务器吗?你还在手动 docker build -t .... 吗?快来解放自己的双手吧! 一次配置,永久一键发布~ (只要服务...
Apache Pulsar 是灵活的发布-订阅消息系统(Flexible Pub/Sub messaging),采用分层分片架构。 发布-订阅消息系统 关于发布-订阅模型的概...
程序员圈子里一直流传着一个魔咒:35 岁的中年危机。 他们说,35 岁程序员的精力和体力会无法避免地下降;他们说,35 岁程序员的丰富经验没有年轻员工的创新活力吃香;他们说,...
背景 在电商、金融、银行、支付等涉及到金钱相关的领域,为了安全起见,一般都有对账的需求。 比如,对于订单支付事件,用户通过某宝付款,虽然用户支付成功,但是用户支付完成后并不算...
前言 简介 该项目是一套电商系统,包括前台商城系统及后台管理系统,基于SpringBoot+MyBatis实现,采用Docker容器化部署。 前台商城系统:首页门户、商品推荐...
背景 Flink On Yarn的模式, 每次启动任务会将相应的依赖包和flink依赖的jar包, 提交到HDFS上的/user/hdfs/.flink目录下; 随着Flin...
参考:基于StarRocks的用户画像解决方案[https://www.bilibili.com/video/BV13T4y1o7K8?spm_id_from=333.999...
什么是OLAP ? 随着互联网、物联网、5G、人工智能、云计算等技术的不断发展,越来越多的数据在互联网上产生,对互联网的运营也开始进入精细化,因此大数据、数据分析、数字营销开...