大数据_zzzzMing

消费组组（Consumer group）可以说是kafka很有亮点的一个设计。传统的消息引擎处理模型主要有两种，队列模型，和发布-订阅模型。 队列模型：早期消息处理引擎就是按...

大数据_zzzzMing

在很多的流处理框架的介绍中，都会说kafka是一个可靠的数据源，并且推荐使用Kafka当作数据源来进行使用。这是因为与其他消息引擎系统相比，kafka提供了可靠的数据保存及备...

大数据_zzzzMing

本篇主要介绍kafka的分区和副本，因为这两者是有些关联的，所以就放在一起来讲了，后面顺便会给出一些对应的配置以及具体的实现代码，以供参考~ 1.kafka分区机制 分区机制...

大数据_zzzzMing

上一篇讲述了什么是分布式一致性问题，以及它难在哪里，liveness和satefy问题，和FLP impossibility定理。有兴趣的童鞋可以看看分布式系统一致性问题与R...

大数据_zzzzMing

最近在做MIT6.824的几个实验，真心觉得每一个做分布式相关开发的程序员都应该去刷一遍（裂墙推荐），肯定能够提高自己的技术认知水平，同时也非常感谢MIT能够把这么好的资源分...

大数据_zzzzMing

前情提要 Scala函数式编程指南（一） 函数式思想介绍 scala函数式编程（二） scala基础语法介绍 Scala函数式编程（三） scala集合和函数 Scala函数...

大数据_zzzzMing

前情提要 Scala函数式编程指南（一） 函数式思想介绍 scala函数式编程（二） scala基础语法介绍 Scala函数式编程（三） scala集合和函数 Scala函数...

大数据_zzzzMing

这次来说说函数式的数据结构是什么样子的，本章会先用一个list来举例子说明，最后给出一个Tree数据结构的练习，放在公众号里面，练习里面给出了基本的结构，但代码是空缺的需要补...

大数据_zzzzMing

相比于逻辑回归，在很多情况下，SVM算法能够对数据计算从而产生更好的精度。而传统的SVM只能适用于二分类操作，不过却可以通过核技巧（核函数），使得SVM可以应用于多分类的任务...

大数据_zzzzMing

前情提要： 通俗地说逻辑回归【Logistic regression】算法（一） 逻辑回归模型原理介绍 上一篇主要介绍了逻辑回归中，相对理论化的知识，这次主要是对上篇做一点点...

大数据_zzzzMing

在说逻辑回归前，还是得提一提他的兄弟，线性回归。在某些地方，逻辑回归算法和线性回归算法是类似的。但它和线性回归最大的不同在于，逻辑回归是作用是分类的。 还记得之前说的吗，线性...

大数据_zzzzMing

前情提要：通俗得说线性回归算法（一）线性回归初步介绍 一.sklearn线性回归详解 1.1 线性回归参数 介绍完线性回归，那么我们来看看如何运用sklearn来调用线性回归...

大数据_zzzzMing

一.从线性回归的故事说起 相信大家都听过著名的博物学家，达尔文的大名，而今天这个故事的主人公就是他的表弟高尔顿。 高尔顿是一名生理学家，在1995年的时候，他研究了1078堆...

大数据_zzzzMing

前情提要： scala函数式编程（二） scala基础语法介绍 scala函数式编程（二） scala基础语法介绍 前面已经稍微介绍了scala的常用语法以及面向对象的一些简...

大数据_zzzzMing

相信很多同学都想通过阅读一些框架的源码，来提高自己的代码能力，但往往在第一步，搭建环境的时候就碰了壁。 本篇就来介绍下如何在Windows下，将最新版的Spark2.4.3编...

大数据_zzzzMing

上一篇我们讲了关联分析的几个概念，支持度，置信度，提升度。以及如何利用Apriori算法高效地根据物品的支持度找出所有物品的频繁项集。 Python --深入浅出Aprior...

大数据_zzzzMing

在美国有这样一家奇怪的超市，它将啤酒与尿布这样两个奇怪的东西放在一起进行销售，并且最终让啤酒与尿布这两个看起来没有关联的东西的销量双双增加。这家超市的名字叫做沃尔玛。 你会不...

大数据_zzzzMing

前情提要 通俗地说决策树算法（一）基础概念介绍 通俗地说决策树算法（二）实例解析 上面两篇介绍了那么多决策树的知识，现在也是时候来实践一下了。Python有一个著名的机器学习...

大数据_zzzzMing

总是写技术文章，偶尔也想写点别的。 今天来说说美国十年国债倒挂这件事，我会从经济学中的利息的角度来解释分析，让你明白为什么会说美国国债倒挂是一种经济衰退的信号。同时你也会明白...