早8点起床,今天较冷,最近加班多,担心身体扛不住,所以晚起了一会;
spark streaming的处理如果消费不控制数量的话,一旦kafka数据有积压,消息可能会一次性处理很多,导致内存溢出。设置几个关键参数之后,可以控制频率,但是消费还是很慢,需要优化代码,明天继续看吧。
晚上加班到10点多回家。
12时休息。
2019-04-26
©著作权归作者所有,转载或内容合作请联系作者
- 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
- 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
- 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
推荐阅读更多精彩内容
- 《我滴个神啊》真是一部笑中有泪,泪中感动,引人思考的电影。影片一开始引入了印度电影里惯有的歌舞表现方式,先是展现了...