cotecc

一、source 1. kafka source 常用参数： auto.offset.reset，只有当使用新的groupid时，earliest才会生效，因为kafka没有...

cotecc

kafka-python文档 一、consumer 1. 常用api 二、producer 三、其他 3.1 json处理

cotecc

一、常用shell命令 1. 列出所有topic 2. 查看kafka版本 3. 查看offset

cotecc

确保安装juypter和spark.bashrc增加环境变量 使用：在指定目录cmd下执行pyspark启动juypter，进入开发环境

cotecc

一、函数传参 二、如果每个函数都需要同一个功能 三、装饰器实现 四、被装饰函数有参数情况 五、带参数的装饰器 六、类装饰器 主要通过call函数进行调用 七、多个装饰器 其他...

cotecc

一、概念 python2默认ascii码，可以在文件头显式指定编码（utf-8，此时所有str的编码都是utf-8)python2底层两种编码： str，二进制编码 unic...

cotecc

创建 val df=spark.createDataset(Seq(("aaa",1,2),("bbb",3,4))).toDF("key1","key2","key3") ...

cotecc

一、graph基本概念 tensor.graph tf.get_default_graph() with g.as_default() 二、graph基本操作 graph.g...

cotecc

用Bagging优化模型的过程：1、对于要使用的弱模型（比如线性分类器、岭回归），通过交叉验证的方式找到弱模型本身的最好超参数；2、然后用这个带着最好超参数的弱模型去构建强模...

cotecc

一、初始化weight，bias 1.1 理论 1）为了避免0梯度，weight最好初始化带些噪声，且避免数据对称2）为了避免dead neurons(神经元“死掉”)，最好...

cotecc

先tutorial代码，有时间学习

cotecc

一、函数定义： 除去name参数用以指定该操作的name，与方法有关的一共五个参数： input：指需要做卷积的输入图像，它要求是一个Tensor，具有[batch, in_...

cotecc

计划，1月内完成回顾 一、统计学习 输入——模型——输出 损失函数，衡量一次预测的好坏。0-1损失、平方损失、绝对损失、对数损失等 风险函数，衡量平均意义下模型的预测好坏。通...

cotecc

标签（空格分隔）： tensorflow 深度学习 一、一些函数 1 tf.nn.softmax 输入一个张量，默认对张量的最后一维进行softmax计算，以二维矩阵为例,针...