240 发简信
IP属地:甘肃
  • tensorflow 编译部署

    介绍 tensorflow是由google开源的一个用于机器学习和神经网络研究的library。官网地址为https://www.tensorflow.org/,可以去了解下...

  • paxos算法java代码实现

    paxos算法以其难以理解而著称,主要体现在两个方面: 1、Lamport最初的论文以叙事的方式叙述了算法核心 2、算法即使有非常严谨的推导过程也很难被确定为严格正确的(但目...

  • spark源码中为什么有java scala python代码

    新手很迷茫的一个问题,spark源码中为什么有java scala python代码 当看过源码就会发现,spark框架虽然是scala实现的,但是涉及到内存处理,网络,并发...

  • spark master和spark worker挂掉application恢复问题

    首先分5中情况: 1,spark master进程挂掉了 2,spark master在执行中挂掉了 3,spark worker提交任务前全部挂掉了 4,spark wor...

  • 120
    spark源码调试Debug环境搭建

    运行环境 java 1.8 scala 2.11.0 maven 3.3.9 idea 2016 spark 2.0.2 1完成以下配置 java环境变量 scala环境变量...

  • 120
    Spark start all 启动

    前言:通过启动脚本日志很容易找到spark部署的问题。 spark启动脚本如图(standalone模式): 运行start all 脚本加载 spark default c...