namenode.yaml startDelaySeconds: 0 hostPort: 192.168.12.131:1234 name: NameNode rules: ...
发简信
IP属地：北京
-
2024-05-08 hadoop 配置 version=1
-
2024-05-08 hive创建分区外表
1.建表 drop table if exists ods.ods_t_aircompany_inc_day; CREATE EXTERNAL TABLE IF NOT EX...
-
2024-03-18 修改hadoop备份数
１：hadoop中备份数设置：(hdfs-site.xml) dfs.replication 3 ２：hadoop中备份数修改： hadoop dfs -setrep [-R...
-
2024-03-12 linux 查看当前目录下文件or文件夹大小
du -sch * 124M code_spider 2.9G datanebula 1.1G installpackage 294M lianpengtao 118G mo...
-
-
2024-02-02 mysql dump 和 mysql 执行sql文件
## dump mysql库 mysqldump -u root -p --databases datanebula_center > /tmp/datanebula_cen...
-
2024-02-01 CentOS7下mysql8修改datadir之后不能启动
尝试修改了mysql的datadir参数， 同时将数据文件拷贝到了新的目录/data下， 但是启动mysql服务时，提示： [root@mysql8-01 data]# sy...
-
2024-02-01 ERROR 2002 (HY000): Can‘t connect to local MySQL server through socket ‘/var/lib/mysql...1. 错误产生[https://blog.csdn.net/weixin_45777669/article/details/115671283#1__2] 2. 错误产生原因...
-
2024-01-26 【DataX实战】DataX同步ClickHouse数据到Hive
【DataX实战】DataX同步ClickHouse数据到Hive 1.准备数据 1.1 clickhouse建表并插入数据 CREATE TABLE cell_towers...
-
2024-01-23 ntpd 集群时间同步3.2.11集群时间同步 如果服务器在公网环境（能连接外网），可以不采用集群时间同步，因为服务器会定期和公网时间进行校准； 如果服务器在内网环境，必须要配置集群时间同步，否则...
-
2023-12-22 创建服务端git仓库
1. 创建新用户 useradd tesla 2. 修改密码 passwd tesla 3. 修改/etc/sudoers 找到 root ALL=(ALL) ALL ...
-
2023-09-22 shell中各种括号()、(())、[]、[[]]、{}的作用和区别
shell中各种括号()、(())、[]、[[]]、{}的作用和区别 一、小括号，圆括号（） 1、单小括号 () ①命令组。括号中的命令将会新开一个子shell顺序执行，所以...
-
2023-09-20 spark on hive & hive on spark大数据Hadoop之——Spark on Hive 和 Hive on Spark的区别与实现https://baijiahao.baidu.com/s?id=1757731...
-
2023-09-18 echo输出带颜色的字体
echo输出带颜色的字体 https://hellogitlab.com/OS/Centos/X_echo_color_font.html#%E6%97%A5%E5%BF%9...
-
2023-09-13 centos间自动同步脚本
#!/bin/bash #1. 判断参数个数 if [ $# -lt 1 ] then echo Error: Not Enough Arguement! exit;...
-
centos7 新加磁盘 磁盘挂载
一、当硬盘小于等于2T时，可以用fdisk进行挂载 fdisk /dev/sdb 1、查看帮助。 输入：m 2、新建分区。 输入：n 3、创建逻辑分区 输入：p 4、输入分区...
-
2023-04-13 处理数据倾斜
INSERT OVERWRITE TABLE fin_dw.dwd_cdplabel_jt_market_strategy_info_pda PARTITION (pday=...
-
distribute by rand
distribute by rand的风险： distribute by rand这样的使用场景，使用不带随机种子的函数，在mapreduce框架下这种使用方式存在一定风险，...