yanxishe.com<br>专注AI开发者和学术青年求知求职。<br><br>没有人是一座孤岛，每个AI爱好者都可以在这里分享你的知识与成长。
发简信
IP属地：北京
-
公号：Python大数据分析，关注送10G资料
-
18 Spark Streaming程序的优雅停止
Spark Streaming程序的停止可以是强制停止、异常停止或其他方式停止。首先我们看StreamingContext的stop()方法 这里定义了两个参数，stopSp...
-
-
-
深入理解数据中台
-
感谢关注Leetcode主题，发表之前，请先搜索是否有笔友已经投递了同样的题目。欢迎在同一个题目下评论回复不同的解决方案。 https://oj.leetcode.com/
-
spark graphx 图计算写在前面 态度决定高度！让优秀成为一种习惯！ 世界上没有什么事儿是加一次班解决不了的，如果有，就加两次！（- - -茂强） 什么是一个图 一个网络Network 一个树Tre...
-
Hbase万亿级存储性能优化总结
背景 hbase主集群在生产环境已稳定运行有1年半时间，最大的单表region数已达7200多个，每天新增入库量就有百亿条，对hbase的认识经历了懵懂到熟的过程。为了应对业...
-
【面试】HBase面试题
以下大部分题目是从网上搜索得来，答案是笔者给的，若有错误，烦请指出，谢谢。 1 每天百亿数据存入HBase，如何保证数据的存储正确和在规定的时间里全部录入完毕，不残留数据 答...
-
RDD or DF获取分区编号和数据
思考： RDD的分区怎么获取？RDD分区怎么根据数据划分分区？ 例如： 首先看一下parallelize方法 1.分发一个本地Scala集合来形成一个RDD2.paralle...
-
Spark Streaming 实现原理Spark Streaming 实现思路 Spark Streaming 与 Spark Core 的关系可以用下面的经典部件图来表述： 可以看到Spark Streamin...
