Executor内存使用 因此Executor的内存主要分为三块： 第一块是让task执行我们自己编写的代码时使用，默认是占Executor总内存的20%； 第二块是让tas...
发简信
IP属地：山西
-
Spark 资源调优 -
Spark Repartition 使用
看到一些同学的Spark代码中包含了很多repartition的操作，有一些不是很合理，非但没有增加处理的效率，反而降低了性能。这里做一个介绍。 repartition 从字...
-
因用了Insert into select语句，同事被开除了！
来自：掘金（作者：不一样的科技宅）原文链接：https://juejin.im/post/5e670f0151882549274a65ef 前言 Insert into se...
-
使用marven实现java和scala的互相调用
1. Java调用Scala类 整个工程的目录结构如下： App.java为主程序，由Java语言实现，MyScala.scala为被调用的类，由Scala语言实现。 App...
-
Eclipse中使用gitEclipse从LUNA版本开始默认支持了GIT客户端，可以在导航菜单中windows --> preferences搜索git查看git相关配置。Eclipse中对于git...
-
Java汉字转拼音pinyin4j用法
一、工具介绍 pinyin4j 是一个支持将简体和繁体中文转换到成拼音的Java开源类库； 1. 功能 支持同一汉字有多个发音 还支持拼音的格式化输出，比如第几声之类的， 同...
-
斯坦福 CS224d 自然语言处理中文笔记
-
-
Python优雅的操作Exchange邮箱——exchangelib模块使用介绍
最近想把公司邮箱的附件给下载下来，附件好多都是我整理的报告和文档，一个个去下载明显太傻，碰到这种问题第一个想到的就是Python啦 需求很简单，只需要登录自己的Exchang...
-
关于Dashboard设计的总结作为一个TOB产品的设计师，一定设计过仪表盘（Dashboard）无论是哪一种数据产品，仪表盘（Dashboard）都是最核心的功能。他是用户接触数据的第一个页面，相当于数据...
-
几种常用数据标准化方法
引入 评价是现代社会各领域的一项经常性的工作，是科学做出管理决策的重要依据。随着人们研究领域的不断扩大，所面临的评价对象日趋复杂，如果仅依据单一指标对事物进行评价往往不尽合理...
