240 发简信
IP属地:北京
  • azkaban配置多节点集群模式部署

    azkaban有2种集群模式: 1.首先需要在web-server配置多节点模式 2.配置存储模式azkaban有2种3模式:1).local单机情况下使用 2).db集群、...

  • Apache Phoenix(十七)新特性之查询服务器

    Phoenix查询服务器提供了与Phoenix和HBase交互的另一种方法。很快,这将允许从JVM以外的环境进行访问。 概述 Phoenix4.4引入了一个独立的服务器,公开...

  • 120
    Groovy从入门到精通

    一、环境搭建 安装好JDK环境 到groovy官网下载groovySDK,解压到合适位置groovy官网:http://www.groovy-lang.org/image.p...

  • Spark图计算API简介

    一、属性操作符: graph中提供了对vertex,edge和triplet的map操作,类似于RDD中的map操作: def mapVertices[VD2](map:(V...

  • 120
    Lambda架构,Kappa架构和去ETL化的IOTA架构

    经过这么多年的发展,已经从大数据1.0的BI/Datawarehouse时代,经过大数据2.0的Web/APP过渡,进入到了IOT的大数据3.0时代,而随之而来的是数据架构的...

  • 120
    Spark中executor-memory参数详解

    我们知道,spark执行的时候,可以通过 --executor-memory 来设置executor执行时所需的memory。但如果设置的过大,程序是会报错的,如下 那么这个...

  • alibaba/easyexcel 框架使用

    JAVA解析Excel工具easyexcel Java解析、生成Excel比较有名的框架有Apache poi、jxl。但他们都存在一个严重的问题就是非常的耗内存,poi有一...