这段时间因为项目，对parquet做了一系列研究，从写入跟踪到合并及spark使用等等场景。选择parquet来对流数据进行序列化，用于后续离线分析的理由有以下几点：1、流数...
发简信
IP属地：广东
-
Java操作parquet -
scala lazy引发的疑问
by 十三 背景：近日遇到个奇怪的问题：在没有明显循环或递归的代码地方，日志中却抛出了stackoverflow的错误，由于代码入口处是调用了configuration获取y...
-
Scala中资源关闭的小技巧
by 壮衣 在处理数据库连接或者输入输出流等场景时，我们经常需要写一些非常繁琐又枯燥乏味的代码来关闭数据库连接或输入输出流。 例如数据库操作： 例如文本操作： 从上面的两个例...
