李传亮 - 简书

IP属地：上海

Spark - 编译、打包和开发环境搭建
1. 编译打包 Spark 支持 SBT 和 Maven 两种方式，一般构建使用 maven，开发中调试使用交互式的 SBT SBT 执行 bu...

742 0 0
分布式大数据作业调度系统 Arlo

275 0 0

一种大数据作业容器化的方法
大数据分布式作业调度系统的一般架构是由 master 将任务分发到一批 worker 上执行大数据作业有很多种不同的任务类型： Shell J...

367 0 0
Ray autoscaler for k8s installation
https://docs.ray.io/en/latest/autoscaling.html#kubernetes 1. 安装 kuberctl...

1453 0 0
Scale a CPU intensive python task using Ray
本文旨在尝试使用 Ray 将一个运行在单机环境，非常消耗 CPU 且运行时间较长的算法任务，改成分布式环境运行的程序，以达到同时降低单台机器的负...

0.1 306 0 1
基于 RocksDB 的可靠 Kafka producer
https://github.com/artiship/rocks-kafka-producer 为什么 Kafka producer 需要持久...

900 0 0
基于 RocksDB 的持久化队列
https://github.com/artiship/rocks-queue-java[https://github.com/artiship...

2455 0 0

使用 Supervisord 托管 Java 应用
目前结构应用启动脚本 Supervisor 配置文件启动服务

211 0 0
Presto HA with haproxy
As we know, Presto coordinator service has the single point of failure i...

2192 0 0