敏感字段标注问题 数据仓库里，多多少少会有一些敏感字段，比如用户手机号、通信地址，一旦泄露危害很大。而数据仓库需要尽可能方便让用户使用，同时又要保护敏感字段不能随意访问，一方...
IP属地：浙江
-
数据仓库敏感字段自动识别
-
Hive表数据质量校验的设计与开发
一张Hive计算完成后，开发者会希望知道计算结果是否符合预期，比如是否有脏数据，是否数据量符合预期。这里就有两个问题，一个是校验什么，另一个是怎么校验。 校验什么 单个字段校...
-
掌控数据仓库开发的主动权
今天团队在讨论过去一段时间的问题，有提到这么一个观点：作为数据仓库工程师，被动接了很多需求，数据的业务价值不明显。 互联网公司的业务变化快，经常会有产品上线或旧业务变更，这是...
-
给初心者的数据仓库元数据系统开发指南加过一些数据开发的社群，经常会有人问元数据系统怎么开发，大概网上很难搜到相关的好文章。 什么是元数据 首先，元数据的概念，通常解释为数据的数据，这个太难看懂了，需要换个角度解...
-
元数据系统的产品形态
上一篇 给初心者的数据仓库元数据系统开发指南 主要是描述了元数据的基本概念和典型需求。实际的开发和使用中，还有个基本问题容易被混淆，关于元数据的产品形态。 元数据门户 这是最...