240 发简信
IP属地:浙江
  • Coarse Grained究竟是什么意思?

    Spark的Driver本身就是Scheduler,完整的类名叫做CoarseGrainedSchedulerBackend,为什么叫Coars...

  • Pycharm远程运行报错While creating remote tunnel for SshjSshConnection( @ )@6ac86b66: localhost:63342 ==...

    Open Help -> Find Action -> Registry and disable sshj: ide.ssh.library.b...

  • Task数量过多

    背景 当spark最终输出文件stage,task数量非常多时,会在driver端单线程执行大量的rename操作,比较耗时,如何解决呢? 分析...

  • 程序员与工程师

    胶水工程师 复制粘贴工程师 轮子工程师

  • 模型性能参数FLOPS、MACs详解

    参考 每秒浮点运算次数-维基百科https://www.zhihu.com/question/65305385 https://github.c...

  • Lambda架构和Kappa架构

    本文简单介绍下两种架构。

  • 把人生玩成一个养成游戏

    养成游戏有很多心理学上的机制,能抓住人心,让人沉迷其中。很多玩到后面,也会无聊。 现在的很多长期运行的游戏,都是半竞技半养成的,比如王者荣耀,。...

  • 机器学习问题

    应用机器学习来解决实际场景的问题,通常要把实际应用场景的需求,转化为对一个可微函数的梯度下降求最优解的数学问题。 这里有两点,损失函数怎么定义。...

个人介绍
May you be happy.
May you be healthy.
May you be free of worry.