240 发简信
IP属地:北京
  • 为什么要创建clp,直接在shape里画不行吗

    Allegro中建立异形焊盘:

    有些器件封装的PAD是非常规 (圆形,方形或是长方形)的异形PAD, PADS和Allegro中都可以建立异形焊盘.异形PAD是通过画Shape来实现的.在PADS中建立异形...

  • 120
    Pyspark Join操作

    Spark Join 操作 [TOC] 官方文档:https://spark.apache.org/docs/2.4.7/api/python/pyspark.sql.htm...

  • 启用Kerberos认证服务

    开启Kerberos服务需要台KDC服务器。

  • spark创建DataFrame

    通过列表创建 通过列表创建dataframe,列表里面可以是列表也可以是元组。 从json文件创建 json文件people.json: spark代码: 从字典创建 目前还...

  • 人家只是想赚点钻,混点阅读量

    如何毁掉一个男生

    如何毀掉一个男生呢,让我来告诉你吧。 首先和他谈恋爱,在恋爱期间对他很好,很温柔,在他困难的时候鼓励他陪伴他,在他需要的时候第一时间出现,在他生病的时候留在他身...

  • 120
    spark远程读写hive数据库

    实现spark远程连接hive数据库,需要将服务端mysql数据库里的hive数据表DBS和SDS里的localhost改为可以访问到的IP地址或域名。 更改方式参考:hiv...

  • hive修改localhost

    修改DBS表: 修改SDS表:

  • 120
    spark连接Hive

    作者是通过metastore方式实现spark连接hive数据库,所以首先启动metastore: 另外需要将core-site.xml、hdfs-site.xml、hive...

  • 单机安装Hadoop、spark环境

    作者环境: CPU: E5-2678 v3、32G DDR4 Centos7 2003 java 1.8 hadoop 2.10.1 hive 2.3.7 scala 2.1...

  • Hive SQL语句使用记录

    清空表 Hive导入csv 作者在导入csv文件后发现数据全是NULL,经过一番搜索发现是分隔符不一致。csv文件的分隔符是','号,hive在创建的时候并未设置分隔符,从而...

  • 120
    制作linux系统盘

    提到大数据开发环境,首先想到的是得有一个系统,本人之前热衷于ubuntu。但随着工作的深入,发现使用CentOS的多些,据说系统会比较稳定,至于稳定的原因是运维人员多[Dog...

  • pyspark保存为csv

    为了方便调试,需要输出数据到csv,但是确遇到excel打开乱码问题,今天就解决这个问题。 保存CSV repartition(1)是将所有分区文件合并成一个,不加这个选项会...

  • spark使用addFile

    addFile addFile可以把文件分发到各个worker当中,然后worker会把文件存放在临时目录下。之后可以通过SparkFiles.get()获取文件 代码

  • spark创建SparkSession

    SparkSession介绍 SparkSession 是 spark2.0 引入的概念,可以代替 SparkContext,SparkSession 内部封装了 SQLCo...

  • 120
    我的大数据学习之路

    前言   要从事计算机行业的工作,不管是什么工作,开发、测试、还是算法等,都是要有一门自己比较熟练的编程语言,编程语言可以是C语言、Java、C++等,只要是和你后续工作所相...