昨天还是前天,正好看到朋友圈里大家都在发AI前线推的一篇文章。数据中台已成下一风口,它会颠覆数据工程师的工作吗?, 个人认为风口谈不上,但是确实是技术发展到一定程度的产物。这...
![240](https://cdn2.jianshu.io/assets/default_avatar/10-e691107df16746d4a9f3fe9496fd1848.jpg?imageMogr2/auto-orient/strip|imageView2/1/w/240/h/240)
昨天还是前天,正好看到朋友圈里大家都在发AI前线推的一篇文章。数据中台已成下一风口,它会颠覆数据工程师的工作吗?, 个人认为风口谈不上,但是确实是技术发展到一定程度的产物。这...
员工为什么离职,一直是困扰企业的难题。如何降低员工的离职率,必须从研究员工为什么离职开始。 员工离职,特别是老员工的离职,对于大多数情况下是一个双输的格局。 首先我想说,离职...
如此好文受益匪浅!!多谢
【源码剖析】- Spark 新旧内存管理方案(上)Spark 作为一个以擅长内存计算为优势的计算引擎,内存管理方案是其非常重要的模块。作为使用者的我们,搞清楚 Spark 是如何管理内存的,对我们编码、调试及优化过程会有很大...
【当 spark.memory.userLegacyMode 为 false 时,在 SparkEnv 中是这样实例化 StaticMemoryManager:】
是不是需要修改为如下:
当 spark.memory.useLegacyMode 为 true 时,在 SparkEnv 中是这样实例化 StaticMemoryManager:
【源码剖析】- Spark 新旧内存管理方案(上)Spark 作为一个以擅长内存计算为优势的计算引擎,内存管理方案是其非常重要的模块。作为使用者的我们,搞清楚 Spark 是如何管理内存的,对我们编码、调试及优化过程会有很大...