beeline 方式设置mapreduce, tez参数出现错误 需要通过参数hive.security.authorization.sqlstd.confwhitelist...
IP属地：江苏
-
Hive 设置
-
Yarn 队列设置设置：yarn.resourcemanager.scheduler.class Capacity Scheduler，定义flink、default两个队列，各自50%
-
Hive 分区locationhttps://blog.csdn.net/MrZhangBaby/article/details/100581183 1.显示Table和Partition的详细信息 2....
-
Hive 数据导入 HBase
https://segmentfault.com/a/1190000011616473 一、Hive 跑批1.建表 默认第一个字段会作为hbase的rowkey。 2.导入数...
-
《Prometheus监控实战》读书笔记Prometheus是一个开源的监控系统。 一、监控简介 监控不仅仅只是系统的技术指标，还可以是业务指标。确保为客户提供可靠恰当的产品。在生产系统中，监控是必须的，它应该和应...
-
用PaaS设施来实施Devops<br>用Devops方法来实施PaaS<br><br>开源项目：<br>FlaskIT 一个IT管理网站框架 <br><a href="https://links.jianshu.com/go?to=https%3A%2F%2Fgitee.com%2Fxhua%2FFlaskIT" target="_blank">https://gitee.com/xhua/FlaskIT</a><br>Openshit一键部署CICD工具 <br><a href="https://links.jianshu.com/go?to=https%3A%2F%2Fgitee.com%2Fxhua%2FOpenshiftOneClick" target="_blank">https://gitee.com/xhua/OpenshiftOneClick</a><br>Openshift SDK Python <br><a href="https://links.jianshu.com/go?to=https%3A%2F%2Fgithub.com%2Fxhuaustc%2Fopenshift-sdk-python.git" target="_blank">https://github.com/xhuaustc/openshift-sdk-python.git</a><br>云平台Cloud Python SDK <br><a href="https://links.jianshu.com/go?to=https%3A%2F%2Fgithub.com%2Fxhuaustc%2Fcloud-sdk" target="_blank">https://github.com/xhuaustc/cloud-sdk</a>
-
Spark on yarn 日志收集
Spark on yarn 模式，日志会随机分配到某个磁盘。为了Flume收集，需要在提交任务时通过自定义log4j，再写一份日志写到某个固定目录下。 log4j-execu...
-
Hive 遗留子进程频繁操作HDFS
NameNode日志中频繁出现rename失败的日志，且频繁GC 根据日志发现查尝试rename 文件/apps/hive/warehouse/zs_db.db/umetri...
-
-
Streamsetshttps://streamsets.com/products/dataops-platformhttps://archives.streamsets.com/index.h...
-
-
Beeline doesn't work with -e option when started in background
Beeline doesn't work with -e option when started in background 原帖：http://www.zhangdongs...
-
安装Ranger UserSync for LDAP
https://cwiki.apache.org/confluence/display/RANGER/Configure+Ranger+UserSync+for+LDAP h...
-
007.Azkaban-3.x 页面操作手册1. 创建Flow 使用Azkaban Flow 2.0 来创建任务流，Flow 1.0 将被废弃 创建一个名为flow20.project的文本文件，添加如下内容用以说明这...
-
阿里云官网内容平台！汇聚阿里云优质内容（入门、文档、案例、最佳实践、直播等）！如需转载或内容类合作，邮件yqgroup@service.aliyun.com 秒级回复！<br>
-
阿里云官网（<a href="https://links.jianshu.com/go?to=https%3A%2F%2Fwww.aliyun.com%2F" target="_blank">https://www.aliyun.com/</a>），每日分享最新产品技术内容、官网活动资讯！
-
Spark之Spark Streaming原理一、Spark Streaming概述 Spark Streaming类似于Apache Storm，用于流式数据的处理，具有高吞吐量和容错能力强等特点。Spark Stre...
