240 发简信
IP属地:北京
  • @木木一直在哭泣 那时候文档的确比较少,看过苹果文档,还是GitHub也有一些资源介绍

    iOS音频(1)——AudioToolbox

    一、前言二、音频文件Audio File Services三、音频文件转换Extended Audio File Services四、音频流Audio File Stream...

  • 120
    2019-09-20

    CPU架构分类 从CPU发明到现在,有非常多种架构,从我们熟悉的X86,ARM,到不太熟悉的MIPS,IA64等 X86架构来由 IBM 开始做 IBM PC 时,一开始并没...

  • HBase的部署

    HBase的部署方式包括: HBase的安装 本文的HBase安装是在Hadoop已经安装好的基础上实现的,所以之前要导出JAVA_HOME、HADOOP_HOME( 单机模...

  • kafka基础概述

    概述 官方地址http://kafka.apache.org/快速入门教程:http://kafka.apache.org/quickstart官方定义Apache Kafk...

  • Hive基本使用

    Hive有三种复杂数据类型ARRAY、MAP 和 STRUCT。ARRAY和MAP与Java中的Array和Map类似,而STRUCT与C语言中的Struct类似,它封装了一...

  • DataFrame常用API操作

    以列的(列名,列的类型。列值)的形式构成的分布式数据集,按照列赋予不同名称,约等于关系数据库的数据表 A DataFrame is a Dataset organized i...

  • Hadoop序列化

    序列化 把内存中对象转换成字节序列(或其他数据传输协议)以便于存储到磁盘(持久化)和网络传输 反序列化 接收到的字节序列或者其他传输协议或者是磁盘的持久化数据转换成内存的对象...

  • Spark MLlib

    概述 机器学习是用数据或以往的经验,并以此来优化程序的性能指标。机器学习本质思想:使用现有的数据,训练出一个模型,然后在用这个模型去拟合其他的数据,给未知的数据做出一个预测结...

  • 120
    Hadoop伪分布式配置

    环境变量配置 环境变量生效 HDFS 测试Hadoop自带的wordcount 修改hadoop-env.sh配置文件。echo $JAVA_HOME,修改JAVA_HOME...

  • RDD和DataFrame转换

    利用反射机制推断RDD 在利用反射机制推断RDD模式时,需要首先定义一个case class,因为,只有case class才能被Spark隐式地转换为DataFrame。 ...

  • RDD操作——文件数据读写

    要加载本地文件,必须采用“file:///”开头的这种格式。执行上上面这条命令以后,并不会马上显示结果,因为,Spark采用惰性机制,只有遇到“行动”类型的操作,才会从头到尾...

  • RDD操作—— 键值对RDD(Pair RDD)

    键值对概述 “键值对”是一种比较常见的RDD元素类型,分组和聚合操作中经常会用到。Spark操作中经常会用到“键值对RDD”(Pair RDD),用于完成聚合计算。普通RDD...

  • Scala基础——模式匹配

    match 当需要从多个分支进行选择的场景,类似Java中的switch语句,不需要使用break停止代码执行。 eg: 在模式匹配的case语句中,还可以使用变量。当col...

  • RDD操作—— 行动(Action)操作

    行动操作是真正触发计算的地方。Spark程序执行到行动操作时,才会执行真正的计算,从文件中加载数据,完成一次又一次转换操作,最终,完成行动操作得到结果。 惰性机制 在当前的s...

  • 120
    Spark SQL

    概述 官方地址 http://spark.apache.org/sql/Spark SQL是Spark用来处理结构化数据的一个模块,它提供了2个编程抽象:DataFrame和...