240 发简信
IP属地:广东
  • 120
    Spark2.0 scheduler模块源码学习

    Scheduler模块主要负责stage的划分,以及job的调度及submit。是整个spark计算流程中比较重要的部分。 �1.从saveAsTextFile开始 ��阅读...

  • @疯狂的轻骑兵 嗯嗯,我现在也在整理spark这块

    Spark2.0 scheduler模块源码学习

    Scheduler模块主要负责stage的划分,以及job的调度及submit。是整个spark计算流程中比较重要的部分。 �1.从saveAsTextFile开始 ��阅读...

  • 现在才看到,分析不错

    Spark2.0 scheduler模块源码学习

    Scheduler模块主要负责stage的划分,以及job的调度及submit。是整个spark计算流程中比较重要的部分。 �1.从saveAsTextFile开始 ��阅读...

  • MySQL问题两则

    这段时间处理了两个比较有意思的MySQL问题,一个死锁的,一个优化的,陡然发现其实自己对MySQL的理解还不深入,很多运行机制也是知其然但不知其所以然,后续还需要好好恶补一下...

  • mybatic与spring结合的事务管理

    mybatic与spring结合的事务管理 原文地址:http://czj4451.iteye.com/blog/2037759 mybatis与spring结合后,事务管理...

  • spark streaming 与kafaka结合 低阶 高阶api的一些理解

    1. createStream会使用 Receiver;而createDirectStream不会,数据会通过driver接收。 2.createStream使用 Recei...