前言 spark 读写hive 比较多，发现总是有小文件很多，几百个几十KB的文件，这样对于后续处理很不友好，这里统一说一下。前置条件 我准备了一张50W数据的一张hive...
发简信
IP属地：广东
-
spark 离线任务对于小文件的处理
-
-
Github: <a href="https://links.jianshu.com/go?to=https%3A%2F%2Fgithub.com%2Fyuanhoujun%2F" target="_blank">https://github.com/yuanhoujun/</a><br>微信公众号: 欧阳锋工作室<br>微博: 欧阳锋工作室<br>官方博客：<a href="https://links.jianshu.com/go?to=http%3A%2F%2Fwww.youngfeng.com" target="_blank">http://www.youngfeng.com</a><br>个人微信：ouyangfeng_office<br><br>关注欧阳锋工作室，来一起玩耍
