12篇文章 · 1078字 · 1人关注
1.hive 开窗函数 udf 写sql 调优2.kafka 两种模式 offset保存3.sparkstreaming 原理 调优4.hbas...
1.提升资源利用率 1.executor数量2.cpu core数量3.executor内存4.driver内存 2.提高并行度 task数量是...
java.lang.ClassCastException: java.math.BigDecimal cannot be cast to sca...
这里在导入的时候出现了乱码的问题,这个csv的文件,要先转换为utf-8的模式。
使用kafka自身保存offset Kafka版本0.10.1.1,已默认将消费的offset迁入到了Kafka一个名为__consumer_o...
1.zookeeper有两个,开始的那个zookeeper没关闭,不能开启现在的这个2.kafka 下面的server.proporties 里...
这个地方加一个cache()方法,这里反复拉取的时候太消耗内存
https://blog.csdn.net/chenliyu0518/article/details/84786283
1.nginx配置 让浏览网页的记录写在一个固定的文件里面。然后写一个定时任务的脚本,让任务定时切割那个文件,把每天的日志写入到以日期命名相应的...
文集作者