大数据技术进阶

IP属地：北京

阿里，头条，美团，快手大数据开发岗面试总结
从3月份开始，陆续面了阿里，头条，美团，快手四家公司的大数据开发岗位，近20场面试面下来挺耗费脑力的，不过结果还行，除了头条外，目前拿到了其他三...

6.7 7112 3 48
Flink实战| Flink+Redis实时防刷接口作弊
随着人口红利的慢慢削减，互联网产品的厮杀愈加激烈，大家开始看好下沉市场的潜力，拼多多，趣头条等厂商通过拉新奖励，购物优惠等政策率先抢占用户，壮大...

0.1 8818 0 1

知识图谱在大数据中的应用
随着移动互联网的发展，万物互联成为了可能，这种互联所产生的数据也在爆发式地增长，而这些数据恰好可以作为分析关系的有效原料。如果说以往的智能分析专...

1.2 2309 0 5
深度好文 | 资深技术Leader曹乐：如何成为技术大牛
双生说：曹乐是典型学霸，清华本硕，多年互联网大厂研发经验，所以“资深”。我刚到新部门的时候，约各位合作部门的Leader请教，也算帮我做新岗位入...

0.3 1566 0 4
Kafka如何彻底删除topic及数据
更多大数据技术干货，欢迎关注“大数据技术进阶”微信公众号。前言：删除kafka topic及其数据，严格来说并不是很难的操作。但是，往往给ka...

519 0 0
MapReduce Shuffle 和 Spark Shuffle 原理概述
更多大数据技术干货，欢迎关注“大数据技术进阶”微信公众号。 Shuffle简介 Shuffle的本意是洗牌、混洗的意思，把一组有规则的数据尽量打...

2.4 1626 2 16
【转载】mysql和hbase应用场景对比
当我们对于数据结构字段不够确定或杂乱无章很难按一个概念去进行抽取的数据适合用使用什么数据库？答案是什么，如果我们使用的传统数据库，肯定留有多余的...

620 0 1

【转载】Spark 性能调优
0、背景上周四接到反馈，集群部分 spark 任务执行很慢，且经常出错，参数改来改去怎么都无法优化其性能和解决频繁随机报错的问题。看了下任务的历...

466 0 3
【转载】Spark调优（数据序列化和内存调优）
翻译自Spark官网文档：https://spark.apache.org/docs/2.1.0/tuning.html 前言由于大多数Spa...

0.1 555 0 4