这里将持续更新大数据、人工智能相关技术的博文，喜欢的朋友请为我点赞！
发简信
IP属地：辽宁
-
现在北京发展，在核桃编程负责Scratch产品线的课程设计<br><br>一直专注于 少儿编程和 steam 内容，关注和参与少儿编程教育行业的发展<br><br>欢迎关注我的知乎专栏：<a href="https://links.jianshu.com/go?to=https%3A%2F%2Fzhuanlan.zhihu.com%2Fkidscode" target="_blank">https://zhuanlan.zhihu.com/kidscode</a><br><br>我的微信公众号：少儿编程许毅松<br>免费交流群：<a href="https://links.jianshu.com/go?to=https%3A%2F%2Ft.zsxq.com%2FvFIIYvr" target="_blank">https://t.zsxq.com/vFIIYvr</a><br>不定期分享对于行业的思考
-
启动hadoop时，datanode未能正常启动
启动hdfs时，查看进程发现没有datanode进程 尝试单独启动datanode，发现还是不行 然后到hadoop日志目录下查看datanode得日志信息报错信息如下： 此...
-
hdfs ha脚本邮件预警failover
1.脚本编写 1.1.执行脚本 此时hdfs ha没有产生failover，所以仅仅是打印了集群hdfs ha状态 2.模拟failover 此时再次执行 get_hdfs_...
-
mail 465邮件配置1.开启QQ邮箱SMTP服务 然后点击图片右下角生成授权码 ，获取到授权码 2.停止服务 此操作是在root用户下进行 3.启动postfix服务 此操作是在root用户下进...
-
shell脚本编程(进阶)
以三台机器搭建的集群为例 1.查看三台机器的进程 2.拷贝文件脚本 3.启动集群shell脚本 3.1 编写启动脚本 3.2 执行脚本并查看进程 3.2.1 排查集群未启动成...
-
shell脚本编程(基础)
输出字符串hello world shell debug模式 变量定义与引用 ⚠️ 注意点 = 前后不能有空格变量名称一般为大写调用变量最好使用{} 例如：${date1}字...
-
-
HDFS Yarn HA架构图及架构区别HDFS HA架构图 1.各组件说明 active nn(NameNode) 接收client的rpc请求并处理，同时自己editlog写一份，也向JN的共享存储上的edit...
-
Hadoop集群搭建1.组件版本 2.组件安装与配置 2.1.添加hadoop用户并创建目录 以ruozedata001机器为示例，ruozedata002/ruozedata003两台操作一致...
-
YARN调度器种类与区别三种调度器 1.FIFO调度器(FIFO Scheduler)2.容量调度器(Capacity Scheduler)3.公平调度器(Fair Scheduler) 三种调度器...
-
spark2.4.2源码编译集成hadoop-2.6.0-cdh5.15.1
1.准备工作 1.1 组件及源码下载 ⚠️ 版本要求：JDK1.8+，maven3.5.4+，scala 2.11.+ 1.2 环境搭建同：hadoop-2.6.0-cdh5...
-
hadoop-2.6.0-cdh5.15.1源码编译1.前期准备工作 1.1 组件及源码下载 ⚠️ 编译该版本源码需要jdk1.7 1.2 安装必要工具 1.3 安装必要的依赖库 1.4 上传压缩包并解压缩配置环境 这里没有添...
-
适合练习的10个Python项目，每个项目都不到500行代码
以下10个练手项目均摘录自一本尚未出版的 Python 神书《500 Lines or Less》，尽管没有出版，但其 review 版已在官方博客放出。 1. 实现一个网络...
