240 投稿
收录了7篇文章 · 1人关注
  • sqoop学习(概念、目标、导入)(一)

    前言 个人目前理解:sqoop作用就是可以在mysql与hive之间相互抽取、导入。 扩大理解就是 关系型数据库(Mysql、Oracle)等 ...

  • Resize,w 360,h 240
    hive报错

    1、HQL子查询别名问题报错:hive query failed cannot recognize input near '(' 'select...

  • Resize,w 360,h 240
    Hive4:Hive报错集锦

    hive导入数据报错 ​ 报错原因: load data local顺序写反了 改顺序后执行成功: hive (badou)> load dat...

  • Resize,w 360,h 240
    Sqoop工具从hive导出数据到MySQL踩坑记

    这两天有一个需求如文章题目所示,要把之前从mysql数据库导出到hive上的数据再反向操作导到mysql,具体用途就是生产mysql数据库会备份...

  • 使用sqoop import从mysql往hive含分区表中导入数据的一些注意事项

    先看下面这条语句,它实现的功能是将特定日期的数据从mysql表中直接导入hive 以下对命令中的参数作简单说明: --connect /--us...

  • 数据仓库中如何做增量处理

    为什么做增量数据量大,只需要增量最新被更改的数据。 如何做增量(1)insert into比如行为数据,发生一条记录就插入一条,数据不会被upd...

    0.1 FxData 0 5
  • sqoop定时增量导入mysql数据到hdfs(hive)

    需求 有2张大的mysql表,量级分别是1亿和4.5亿(太大了,DBA的同学正在考虑分表),而且数据是增量的,需要写spark任务做处理,直接读...

    0.2 Sx_Ren 3 8
  • HQL之函数使用

    在HQL中,我们可以使用关系操作符、数学操作符、逻辑操作符、复合类型操作符以及复合类型构建器。其中,关系操作符、数学操作符和逻辑操作符这三个操作...

专题公告

11月份,想好好学习hive hql