Hadoop运维日常 - 专题

投稿

Hadoop运维日常

收录了31篇文章 · 23人关注

Zookeeper选主流程
节点角色在Zookeeper集群中，主要分为三者角色，而每一个节点同时只能扮演一种角色，这三种角色分别是： Leader 接受所有Follow...

0.3 运动书生 2 6
Grafana全面瓦解
1.概述--美观、强大的可视化监控指标展示工具 grafana 是一款采用 go 语言编写的开源应用，主要用于大规模指标数据的可视化展现，是网络...

19.9 康小为6840 37 256 1

日志收集系统loki+promtail+Grafana 部署
一、简介Loki是受Prometheus启发由Grafana Labs团队开源的水平可扩展，高度可用的多租户日志聚合系统。开发语言: Goo...

2.5 前浪浪奔浪流 0 20
Observer NameNode 的读写一致性保证
背景 Hadoop HDFS 3.x 引入了 Observer NameNode 这个新角色之后，典型的集群部署从一主一备，变为一主一备一OBN...

xudong1991 0 2
grafana插件开发快速入门
简介 Panels能够帮助我们通过不同的方式可视化数据，grafana里面已经集成了一些panel，但是我们也可以自定义开发panel，来支持一...

0.1 Nick_4438 0 2
分析hdfs文件变化及监控小文件
1、文档编写目的目前各个企业都在利用Hadoop大数据平台，每天都会通过ETL产生大量的文件到hdfs上，如何有效的去监测数据的有效性，防止数...

0.2 jhonshonjs 0 4
Spark运维
spark on yarn运维场景：对于集群故障和集群配置调整可能对spark实时任务造成的影响及所需采取措施进行记录，并制定对应解决方案。方...

Mr_Qifei 0 1

Hadoop运维
Hadoop集群运维场景1：namenode节点故障，active namenode节点状态切换？如何恢复？ 1.1 Hadoop HA 的n...

0.2 Mr_Qifei 0 3
HBase原理——要弄懂的sequenceId
为什么需要sequenceId? HBase数据在写入的时候首先追加写入HLog，再写入Memstore，也就是说一份数据会以两种不同的形式存在...

0.1 丨程序之道丨 0 2
yarn使用cgroup隔离cpu资源
yarn默认只管理内存资源,虽然也可以申请cpu资源,但是在没有cpu资源隔离的情况下效果并不是太好.在集群规模大,任务多时资源竞争的问题尤为严...

0.2 哪天改改 5 9 1