博主希望能够得到大家的点赞收藏支持!非常感谢点赞,收藏是情分,不点是本分。祝你身体健康,事事顺心! 在这个快节奏的时代,我们似乎总是在追求完美的成功,却常常忽略了那些 “部分...
博主希望能够得到大家的点赞收藏支持!非常感谢点赞,收藏是情分,不点是本分。祝你身体健康,事事顺心! 在这个快节奏的时代,我们似乎总是在追求完美的成功,却常常忽略了那些 “部分...
总体一致: Hive-sql与SQL基本上一样,因为当初的设计目的,就是让会SQL不会编程MapReduce的也能使用Hadoop进行处理数据。 因此,大胆使用SQL的,如果...
@TOC 简介 在 Java 8中,添加了新的时间工具包 java.time LocalDate LocalTime LocalDateTime 下面我们以 LocalDat...
SimpleDateFormat 创建SimpleDateFormat时即可指定各种时间格式 format() 把时间转化为对应格式的字符串 parse() 把对应格式的字...
在我们的日常开发中,相信数据类型的转换曾花费大家不少的时间与精力。那么,这次我们就来探讨和总结,Java的时间类型的转换。 Date 用于存储日期信息(可准确到秒) new ...
我们一位很认真负责又和蔼可亲的老师说过一句话:“现在各种语言技术更新迭代的速度非常快,推陈出新。但一些经典的思想不会被时间冲淡,设计模式就是一些经典开发思想的总结” ...
简介 Hive是基于Hadoop的数据仓库大数据组件。将易上手的SQL语句转化成MapReduce作业。 数据结构 元数据Hive存储的是一张张的数据表,而元数据就是...
在提起常用的Linux命令时,你排查异常进程时,一定使用过 ps -ef,那么如此常见的 ps 命令具体是什么意思呢? 字段含义UID进程的所属用户PID进程IDPPID父进...
1. 错误背景 前些天,Spark读取Oracle数据库时发生这个报错。Numberic Overflow,一般来说就是拿来装数字的字段类型装不下了。比如你用 Int类型来装...
Flume简介 Flume is a distributed, reliable, and available service for efficiently col...
我们通过配置 jdbc.properties 来使用 JNDI 模式连接数据库;这次我们的密码是 因为Kettle在解析 jdbc.properties 时,如果遇到井号,会...
问题背景 在 Kettle 的【表输入】模块,编写了复杂的SQL语句,虽然在数据库中正常执行,数据量和查询时间都不大,但就是会出现 ORA-01013 user reques...
前言 本文是基础性文章,针对初次接触flume的朋友,简化了大部分内容,后续有时间会加上相关高级使用 为什么需要flume? 解耦:对于数据产生者,不关心数据被谁使用,对于数...
简介 iptables作为Linux系统的防火墙服务,我们几乎不可避免的会用到这项服务。而iptables有非常多的规则,这里我们就简单介绍一些常用的iptables技巧 i...
简单操作技巧 使用 iptables -L 查看当前环境的 iptables 规则还未设置访问规则 插入禁止访问的规则禁止所有ip地址通过TCP方式访问8443端口 对特定 ...
如何设置spark.kryoserializer.buffer.max value 在运行Spark计算任务时,出现了Buffer Overflow错误,Kryo序列化在序列...
Spark的相关名词有时候学着学着会弄混,就趁着这次自己总结一次,也许不是很好,但不能因此就放弃不写; Driver 提交Spark Application(应用)的机器。有...