对于长时间运行的Spark Streaming作业，一旦提交到YARN群集便需要永久运行，直到有意停止。任何中断都会引起严重的处理延迟，并可能导致数据丢失或重复。YARN和A...
IP属地：新疆
-
【转载】Yarn上常驻Spark-Streaming程序调优 -
盘点那些不足10M，却有逆天功能的软件做为互联网工作者，电脑上的软件越装越多，D盘、E盘、F盘的空间越来越不够用啦！后来，专门搜集那些占量小，但是功能超强的软件，以下就是我用过的一些软件，感觉还不错，拿来和大家分...
-
-
Fatal Python error: pycurl: libcurl link-time version is older than compile-time version
使用yum 时报如下错误 排查错误这里有解决方案http://rohitchauhanit.blogspot.com/2017/12/solution-of-fatal-py...
-
“Application rejected by queue placement policy”异常解决排查问题1.上面的报错与队列相关2.CDH yarn界面问题排查队列生成的样子异常
-
yaml文件怎么没贴出来？
Kubernetes 配置Pod和容器(四)设置CPU和Mem限制
默认情况下pod运行没有任何CPU和内存的限制。这意味着系统中的pod可以尽可能多的消耗CPU和内存在pod执行的节点。 基于多种原因用户可能希望对系统中的单个pod的资源使...
-
如何在宿主机上操作Rancher2部署的K8S集群在遇到这个问题之后，我曾在微信群里面咨询过，得到了一个大致的方向，但是网上的文章都有些问题，现给出一个可行解决方案1.首先安装kubectl，安装kubectl有多种方法，我...
-
-
排版成这个样子也是醉了
rancher+harbor离线安装
安装docker，此docker为社区版docker。docker官方文档：https://docs.docker.comdocker-ce的yum源： https://do...
-
supervisor 从安装到使用
一、安装 源码安装 先下载最新的supervisor安装包：https://pypi.python.org/pypi/supervisor ， 如： 二、配置 1.生成配置文...
-
HDFS做HA时 standby namenode无法启动
异常信息如下： 其实我也是网上看别人的博文的收到启发解决的，只是我感觉他写有点啰嗦，所以在解决问题开心之余就记录了一下，不喜勿喷问题原因：因为在做HA的时候journalno...
-
CDH添加hive组件，异常解决CDH添加hive组件，异常解决CM界面异常 hive角色日志 解决办法：google 了一下，关于这方面的错误都是spring的，看了几个以后有人说是驱动版本跟MySQL的...
