什么是数据模型 数据模型是抽象描述现实世界的一种工具和方法，是通过抽象的实体及实体之间联系的形式，来表示现实世界中事务的相互关系的一种映射。在这...
投稿
收录了23篇文章 · 5人关注
-
数仓--Theory--数仓的数据模型详解
-
数仓--Theory--数仓元数据及管理
需要进行对比学习，弄清楚是hive元数据还是数仓元数据，两者有很大的区别，存储位置也是不一样的 Hive元数据 元数据包括：表名、表所属的数据库...
-
Hbase使用Coprocessor构建二级索引最近在学习Hbase二级索引的构建，虽然网上方案挺多，代码也并不复杂，但还是花了不少时间，主要是集群环境的调试踩了不少坑，毕竟新手... 这里将...
-
Spark on YARN
启动SparkOnYARN 确认HADOOP_CONF_DIR或者YARN_CONF_DIR指向的目录包含Hadoop集群的配置文件。Spark...
-
PySpark on Yarn的相关依赖的解决方式
问题 Spark on Yarn[http://hadoop.apache.org/docs/stable/hadoop-yarn/hadoop...
-
Hive on Spark安装配置详解及避坑指南个人主页：http://www.linbingdong.com 简介 本文主要记录如何安装配置Hive on Spark，在执行以下步骤之前，请...
-
airflow 介绍声明：本文转自我的个人博客，有兴趣的可以查看原文。转发请注明来源。 最近工作需要，使用airflow搭建了公司的ETL系统，顺带在公司分享了一次...
-
搭建Hive所遇过的坑
一.基本功能: 1.启动hive时报错 解决方案: 2.启动hive时报错: 解决方案: 3.启动hive时报错 解决方案: 4.启动hive时...
-
各个公司的大数据架构美团 数据收集特性： 对于数据收集平台，日志数据是多接口的，可以打到文件里观察文件，也可以更新数据库表。关系型数据库是基于Binlog获取增量的...
-
基于docker搭建superset可视化分析平台对于可视化分析方面，因为自己tableau已经用的很熟了，想增加对superset的认识和熟练程度，想搭建一个superset可视化分析平台，以...
专题公告
大数据hdfs, yarn, spark, hbase等等系统的优化和维护
{var%20f='http://v.t.sina.com.cn/share/share.php?appkey=1881139527',u=z||d.location,p=['&url=',e(u),'&title=',e(t||d.title),'&source=',e(r),'&sourceUrl=',e(l),'&content=',c||'gb2312','&pic=',e(p||'')].join('');function%20a(){if(!window.open([f,p].join(''),'mb',['toolbar=0,status=0,resizable=1,width=440,height=430,left=',(s.width-440)/2,',top=',(s.height-430)/2].join('')))u.href=[f,p].join('');};if(/Firefox/.test(navigator.userAgent))setTimeout(a,0);else%20a();})(screen,document,encodeURIComponent,'','','https://upload.jianshu.io/collections/images/1666816/hadoop%E7%94%9F%E6%80%81.jpg', '推荐专题《大数据devops》（ 分享自 @简书 ）','https://jianshuapi.com/c/24625dd70a08?utm_campaign=maleskine&utm_content=collection&utm_medium=reader_share&utm_source=weibo','页面编码gb2312|utf-8默认gb2312'));){kind=link}