背景 数据采集时,为了避免在 kafka 中创建大量的 Topic ,采集时会将小的数据源写入一个共享 Topic 中,以某个字段作为标识。这里有两种方式: 直接将标识写入消...
背景 数据采集时,为了避免在 kafka 中创建大量的 Topic ,采集时会将小的数据源写入一个共享 Topic 中,以某个字段作为标识。这里有两种方式: 直接将标识写入消...
以下文章来源于51CTO技术栈 ,作者李航 本文主要帮助大家熟悉 Nginx 有哪些应用场景、Nginx 特点和架构模型以及相关流程、Nginx 定制化开发的几种模块分类。读...
史上最简单Angular2教程,大叔都学会了 作者:王芃 wpcfan@gmail.com 第一节:初识Angular-CLI第二节:登录组件的构建第三节:建立一个待办事项应...
高可用是指系统无中断的执行功能的能力,代表了系统的可用程度,是进行系统设计时必须要遵守的准则之一。而高可用的实现方案,无外乎就是冗余,就存储的高可用而言,问题不在于如何进行数...
前言 随着这次新冠疫情带来的机遇,我司业务飞速增长,实时数仓的建设已经提上了日程。虽然还没有正式开始实施,但是汲取前人的经验,做好万全的准备总是必要的。本文简单松散地记录一下...
前言 Sink运行器(Sink Runner)运行一个Sink组(Sink Group),Sink组可以含有一个或多个Sink。如果组中只存在一个Sink,那么没有组将会更有...
前言 Redis DeskTop Manager可视化工具(之前一直在用的) 其实我在本地一直是直接用redis-client直接命令行连接redis,一方面是可以熟悉red...
1、背景 将data路径下所有日志文件通过Flume采集到HDFS上 五分钟一个目录,一分钟形成一个文件 2、技术选型 flume中有三种可监控文件或目录的source,分别...
Flume主要有以下集中监控方式: 1.JMX监控 配置 {$FLUME_HOME}/flume-env.sh cd $FLUME_HOMEvi flume-env.sh 之...
一、百变怪 Mockito Mockito可谓是Java世界的百变怪,使用它,可以轻易的复制出各种类型的对象,并与之进行交互。 1.1 对象“复制” 1.2 技能复制 虽然复...
简介 在软件工程方面,软件架构是过去几年中最重要的主题之一。罗伯特·C·马丁(又名鲍勃叔叔)在他的书中深刻地提出了他对清洁架构的看法,我强烈推荐看看。但是当涉及到实施时,事情...
Cookie 存储在用户本地终端上的数据,指某些网站为了辨别用户身份进行session跟踪而存储在本地终端上的数据,通常经过加密,一般应用最典型的案例就是判断注册用户是否已经...