在经过了长时间的折腾之后,终于在Mac环境成功的安装了Gitbook。 安装Gitbook的主要流程如下: 安装node.js>安装Gitbook>安装Gitbook编辑器>...
在经过了长时间的折腾之后,终于在Mac环境成功的安装了Gitbook。 安装Gitbook的主要流程如下: 安装node.js>安装Gitbook>安装Gitbook编辑器>...
题目 面试题目是这样子的: 两个单词如果包含相同的字母,次序不同,则称为字母易位词(anagram)。例如,“silent”和“listen”是字母易位词,而“apple”和...
大数据挑战 多种执行、存储引擎,分钟、小时、天级的任务调度,怎样梳理数据的时间线变化? 任务、表、列、指标等数据,如何进行检索、复用、清理、热度Top计算? 怎样对表、列、指...
Spark 作为一个基于内存的分布式计算引擎,其内存管理模块在整个系统中扮演着非常重要的角色。理解 Spark 内存管理的基本原理,有助于更好地开发 Spark 应用程序和进...
1.背景 在公司搭建了elk集群,集群配置如下: 由于m21p22服务器配置比较老旧,而且上面还有其他人部署的其他应用。硬盘写入性能比较差,因此考虑吧elasticsearc...
速记: 最近在执行spark任务时报出了如下错误: 网上百度来一篇文章,错误几乎一模一样,链接如下:SparkException: Could not find Coarse...
Spark作业性能调优总结前段时间在集群上运行Spark作业,但是发现作业运行到某个stage之后就卡住了,之后也不再有日志输出。于是开始着手对作业进行调优,下面是遇到的问题...
本系列导航:剑指offer(第二版)java实现导航帖 面试题18:删除链表的节点 题目要求:在o(1)时间内删除单链表的节点。 解题思路:直接删除单链表某一节点,无法在o(...
MLlib是Spark的机器学习lib,目的是让机器学习的实践变得更加简单,总的来说它提供了以下几种工具: ML算法:分类、回归、聚类和协同过滤等常用学习算法特征工程:特征提...