文章目的: 1、向没听过或者刚听过但是还对这个监控系统没有任何概念的开发者介绍Prometheus的应用场景。2、向有需要深入的了解的人推荐一些博客、书籍。3、内心真实想法:...
之前在讲HashMap的时候提到过HashMap线程不安全,在并发环境下会发生死锁问题,将导致CPU占用率接近100%。其实死锁的说法并不很贴切,应该说是一种死循环。在JDK...
开启ranger开关vim /etc/ecm/ranger-usersync-conf/ranger-ugsync-site.xml <name>ranger.usersyn...
我的理解是,local的/tmp目录下的空文件夹是hive老版本的bug,博文中连接中的ambari集群是通过修改hive.downloaded.resources.dir参数修改的。而hive.exec.scratchdir是hive执行过程中必要的临时文件目录。应该是两回事。
hadoop集群客户端/tmp目录下临时文件夹处理在集群客户端上执行一些hive的sql后发现/tmp目录下出现非常多的这样格式的空目录 导致客户端的inode资源都快被耗尽 这是hive老版本(这里是1.1)的一个bug,...
早就想写这章了,一直懒得动笔,不过还好,总算静下心来完成了。 刚接触Spark时,很希望能对它的运行方式有个直观的了解,而Spark同时支持多种运行模式,官网和书籍中对他们的...
原因是jar包在运行过程中因为要调试被我mvn package重新编译了,程序依赖的包变化导致运行时错误。
最近对于hotfix有点困惑,所以重新学习一下git。参考资料,感谢。https://www.liaoxuefeng.com/wiki/896043488029600http...
参考资料 基于Impala平台打造交互查询系统(选型)Impala查询优化大数据CDH之查询优化Impala内存优化基础语法 产品定位 实现语言:主要是C++性能: 略优于P...
问题 在CDH5.13.x启用Sentry后,HiveServer2的Client(Beeline、Thrift)中不能使用add jar语句(hive cli方式还是可以的...
问题 CM登录页面加载不出或者非常缓慢 现象 查看阿里云,发现对应rds负载很高,对应的SQL为 相关的数据就表是cm中的AUDITS表发现该表数据量比较大,上亿。 解决方法...
https://www.cloudera.com/documentation/enterprise/5-13-x/topics/impala_langref_unsuppor...
Spark的概念 https://www.cnblogs.com/wzj4858/p/8204411.html 核心基本概念 RDD(Resilient Distribute...
人民邮电出版社 第一章 为何选择Flink 竞品:SparkStreaming/Storm/Samza/Apex Lambda架构(不懂为何叫Lambda)https://a...
问题 每次在idea中改完代码本地编译jar包再上传服务器速度太慢 方法 只上传代码,在服务器上编译 步骤 使用idea内部的deployment工具上传修改好的代码
解决方法:https://www.cloudera.com/documentation/enterprise/release-notes/topics/cdh_rn_hive...
面向对象的三大特征 封装把客观事物封装成抽象的类,并且类可以把自己的数据和方法只让可信的类或对象操作,对不可信的信息进行隐藏。 继承对象的继承关系代表了一种‘is a’的关系...