240 发简信
wenay
IP属地：北京
  • 180
    wenay
    IT干货，免费分享

    https://b23.tv/6UlXVeO

    142 0 0
  • 120
    180
    wenay
    蚂蚁 3 年外包，4个月，刚拿到大家眼中的宇宙工牌！

    先给大家晒一张工牌照： 4个月前，本人还在焦虑自己只是为正式员工打扫战场的二等公民，键盘上的 CRUDer。这次成功的跳槽，让我倍感幸运。 作为外派到花呗的外包码农，月薪 1...

    2048 0 0
  • 180
    wenay
  • 180
    wenay
    Hive常用函数

    1、解析URL字符串的： parse_url 用法： selectparse_url("",[HOST,PATH,QUERY,REF,PROTOCOL,FILE,AUTHOR...

    367 0 0
  • 120
    180
    wenay
    YARN调度策略大揭秘

    YARN调度策略，即存在于resourceManager中, 主要为了进行资源的调度。一共有三大类调度器，分别是FIFO、 Capacity Scheduler和Fair S...

    561 0 0
  • 120
    180
    wenay
    spark任务的提交流程（yarn）

    spark一般都是部署到yarn上使用的，所以就说y问的最多的就是arn的提交流程，两种模式最大的区别就是driver端的执行位置. Yarn Client模式 第一步，Dr...

    964 0 0
  • 120
    180
    wenay
    修改网络YUM源

    默认的系统YUM源，需要连接国外apache网站，网速比较慢，可以修改关联的网络YUM源为国内镜像的网站，比如网易163,aliyun等 安装wget, wget用来从指定的...

    401 0 0
  • 180
    wenay
    面试必练：50道经典SQL练习

    --1.学生表--- Student(S,Sname,Sage,Ssex) --S 学生编号,Sname 学生姓名,Sage 出生年月,Ssex 学生性别--2.课程表 --...

    459 0 0
  • 120
    180
    wenay
    常见面试题

    一、mr的shuffle流程 说到mr的Shuffle，那么首先要明确shuffle属于哪个阶段。shuffle就是从Map端输出到Reduce输入的整个过程，这个过程广义上...

    373 0 0
  • 120
    180
    wenay
    数据仓库的分层，你知道吗？

    数据仓库更多代表的是一种对数据的管理和使用的方式，它是一整套包括了数据建模、ETL（数据抽取、转换、加载）以及作用调度等在内的完整的理论体系流程。 数据仓库在构建过程中通常都...

    2596 0 6
  • 120
    180
    wenay
    Zookeeper内部原理

    节点类型 stat结构体 czxid-创建节点的事务zxid：每次修改ZooKeeper状态都会收到一个zxid形式的时间戳，也就是ZooKeeper事务ID。 事务ID是Z...

    212 0 0
  • 120
    180
    wenay
    一个可以走向巅峰的Git小提示

    和大家聊到了个小“bug”，整理个笔记方便记录 咱们一般默认的步骤都是先把远程仓库复制到本地，然后编辑配置文件，进行推送，同步等相关的操作 上面这个大家都很熟悉了，但是往往不...

    280 0 0
  • 120
    180
    wenay
    Phoenix实战

    1.1 Phoenix定义 Phoenix是HBase的开源SQL皮肤。可以使用标准JDBC API代替HBase客户端API来创建表，插入数据和查询HBase数据。 1.2...

    737 0 0
  • 180
    wenay
    Kafka工作原理

    1 集群成员之间的关系 集群中成员之间的信息是通过zk进行维护的 每个broker都有自己的唯一标识 broker启动时通过创建临时节点把自己的ID注册到zk上，然后kafk...

    409 0 0
  • 120
    180
    wenay
    如何选择SparkSQL中的Join策略

    在大数据分析中，将两个数据集进行 Join 操作是很常见的场景。在 Spark 的物理计划阶段，Spark 的 Join Selection 类会根据 Join hints ...

    962 0 4
  • 120
    180
    wenay
    Zookeeper安装

    本地模式安装部署 安装前准备 安装jdk，拷贝zookeeper安装包到linux系统下，解压到指定的目录 tar -zxvf zookeeper-3.5.7.tar.gz ...

    924 0 0
  • 180
    wenay
    IDEA导入源码包

    选择某个java类，Ctrl+鼠标左键选中某个类名，比如Reducer，然后就进入到源码了。如果没有导入源码，会进入到一个class文件，这里可以选择右侧的Choose So...

    1357 0 0
  • 180
    wenay
    Phoenix创建Hbase二级索引

    1. Phoenix简介 1.1 Phoenix定义 Phoenix是HBase的开源SQL皮肤。可以使用标准JDBC API代替HBase客户端API来创建表，插入数据和查...

    335 0 0
  • 180
    wenay
    Kafka消费者

    1 消费者概念 1.1 消费者与消费者组 应用程序--->kafka--->应用程序 生产者 主题 消费者 1. 上游应用程序将数据发送到主题中再由下游应用程序读取、...

    312 0 0
  • 180
    wenay
    谈Hadoop 3.x 新特性

    Hadoop3.x中增强了很多特性，在Hadoop3.x中，不再允许使⽤jdk1.7，要求必须是jdk1.8以上版本。这是因为Hadoop 2.0是基于JDK 1.7开发的，...

    479 0 0
暂无个人介绍