1.安装Anaconda，里面自带了jupyter 2.安装scala,并配置环境变量 3.安装spark,并配置环境变量 4.安装pip模块 5安装spark' kerne...
发简信
IP属地：上海
-
SPARK WITH JUPYTER NOTEBOOK -
2018-08-10 pandas写入sqlserver错误处理
使用pyodbc时读取数据是ok 的，但写入时会报错 当将DataFrame写回数据库时就报错了 错误如下： 折腾半天总是找到方法了。修改后的代码如下：
-
2018-07-16 执行时间分析今天刚看到ipython的一个函数执行时间的分析器，非常好用，记录一下。 安装模块 pip install line_profiler 导入模块 %load_ext line...
-
spark+matplotlib 数据可视化2018-05-25['"custID","gender","state","cardholder","balance","numTrans","numIntlTrans","creditLin...
-
DataFrame的去重，none值填充及异常值处理2018-05-23
spark 数据建模准备 去重 count of rows: 7count of distinct rows: 6 +---+------+------+---+------...
-
numpy 数组常用函数 2018-05-22
numpy 数组常用函数 where [1 2 3 4 5 6 7 8 9] [[1 2 3][4 5 6][7 8 9]] (array([5, 6, 7, 8], dty...
-
numpy数组1 2018-05-22
Numpy 学习笔记 (3,) 3 dtype('int64') array([0, 2, 4, 6, 8]) array([ 0. , 2.5, 5. , 7...
-
如果你是程序员，或者有一颗喜欢写程序的心，喜欢分享技术干货、项目经验、程序员日常囧事等等，欢迎投稿《程序员》专题。 专题主编：小彤花园 http://www.jianshu.com/users/4a4eb4feee62/ 【程序员】专题拒稿指北：http://www.jianshu.com/p/7c8b33b5f63b 投稿须知： 1.收录相关技术文章，但不限于技术，也可以是项目经验类的文章和程序员日常。 2.文章內不得有任何推广信息。包括但不限于公众号、微博、微信，更不得在通过投稿后再修改文章加入推广信息。你可以将这些推广以及个人信息放在个人主页介绍里。 3.字数极少，段落混乱，大段代码没有放到代码框的文章不收录 4.不相关的内容不收录，请确认文章内容和本专题相关 目前针对优质作者及爱好者，开设了官方程序员微信群，希望加入请发简信给主编小彤花园索取个人微信，主编会将你加入到【程序员】微信群，分享内容，收获知识。添加微信时备注昵称。
