近几年,能够进入互联网公司工作,被看作是个高大上的选择,很多90后、95后一毕业便瞄准互联网公司,80后们也有很多离开原有行业投身其中。 2017年我刚生完宝宝不久,被前同事...
IP属地:北京
近几年,能够进入互联网公司工作,被看作是个高大上的选择,很多90后、95后一毕业便瞄准互联网公司,80后们也有很多离开原有行业投身其中。 2017年我刚生完宝宝不久,被前同事...
最近学习了周志明老师的《深入理解Java虚拟机》,收获颇多,留下一些学习笔记,供以后复习用。 一.学习目标 1.对象存活判断 2.GC(garbage collection)...
火山日常啰嗦学习了一些大数据的相关框架后,发现应用层的东西确实不难,真正难的都是底层原理,所以我查看了很多资料,借鉴了前人的方法再加上自己的理解,写下了这篇文章。 数据倾斜的...
一、数据倾斜 数据倾斜一般发生在对数据进行重新划分以及聚合的处理过程中。执行Spark作业时,数据倾斜一般发生在shuffle过程中,因为Spark的shuffle过程需要进...
1 hive表关联查询,如何解决数据倾斜的问题? 倾斜原因: map输出数据按key Hash的分配到reduce中,由于key分布不均匀、业务数据本身的特、建表时考虑不周、...
大数据从基础到项目实战(一站式全链路最佳学习路径) 课程学习地址:http://www.xuetuwuyou.com/course/312 课程出自学途无忧网:http://...
1.直接插入排序 经常碰到这样一类排序问题:把新的数据插入到已经排好的数据列中。 将第一个数和第二个数排序,然后构成一个有序序列 将第三个数插入进去,构成一个新的有序序列。 ...