240 发简信
IP属地:上海
  • sparksql基本知识

    Rdd和DataFrame的转换 Rdd和DateSet的转换(需要case class :people(...)) DateFrame和DataSet的转换 dataFra...

  • sparkcore的基本知识点

    makeRdd的创建RDD的创建rdd的创建方式大致分为3种:从集合中创建rdd,从外部存储,从其他rdd创建 TransFormationdef map[U:classTa...

  • shell基本语法

    shell脚本的执行方式 定义变量 将命令的返回值赋给变量 设置环境变量 位置参数变量 预定义变量 运算符 条件判断 流程控制 函数

  • hive基本语法

    DDL数据定义 创建数据库: 修改数据库: 显示数据库: 删除数据库 创建表 分区表 DML数据操作 查询

  • Spark Structured Streaming 解析 JSON

    Producer 发送 JSON 数据到 Kafka: JSON 数据内容如下: 代码 JDBCSink 写数据库 one more example json 定义 sche...