hive使用TEZ引擎 说明: 我们知道hive默认计算引擎为MR,而MR的特性决定了它的运算速度并不是太让人满意。在此将其运算引擎修改为Tez(当然在此需要先安装Tez),Tez基于内存的计算使得hive可以有更高的运算效率。 tez-site.xml 参数官方文档 https://tez.apache.o 2022-08-25 Hive
ES机器置换,分片迁移 ES集群要去除三台节点,并新增三台来替换 机器列表: 172.31.50.113 > 172.31.50.25 172.31.49.187 > 172.31.50.24 172.31.49.188 > 172.31.50.23 操作流程: 2022-08-25 ElasticSearch
Redis 哨兵模式设置密码 两台机器一台master,一台slave,两个sentinel master修改 1. redis.conf requirepass 123456 #添加密码 masterauth 123456 2. sentinel.conf sentinel auth-pass mymaster 2022-08-25 运维笔记
查看消费者组 查看zk中的消费者组 kafka-consumer-groups.sh --zookeeper 172.31.50.106:2181 --list 查看kafka维护的消费者组 kafka-consumer-groups.sh --bootstrap-server 172.31.50.106:909 2022-08-25 Kafka
控制台显示用户名和主机名 修改bashrc export PS1='[\u@n1 \W]\$' 设置固定颜色 export PS1='\[\033[1;35m\][\[\033[0m\]\[\033[1;33m\]\u\[\033[0m\]@\[\033[1;32m\]\h\[\033[0m\]:\[\033[1;36m\] 2022-08-23 运维笔记
ssh失败次数过多禁止登陆 lastb 查看登陆失败记录 写脚本 登陆失败超过4次,加入试试黑名单 #!/bin/bash ips=$(sudo lastb |awk '{print $3}'|sort |uniq -c|awk '{if ($1 > 4) print $2}') for ip in ${ips} do i 2022-08-23 运维笔记
便捷指令tail -f 升级为tailf 创建文件tailf.c:vim /usr/local/tailf.c /* tailf.c -- tail a log file and then follow it * Created: Tue Jan 9 15:49:21 1996 by faith@acm.org * Copyrig 2022-08-23 运维笔记
触发器trigger 查看当前库下的触发器 use 数据库名; show triggers; 查询所有触发器 SELECT * FROM information_schema.`TRIGGERS` 表字段 解释 TRIGGER_SCHEMA 表示触发器所在的数据库 TRIGGER_NAME 后面是触发器的名称 EVENT 2022-08-17 Mysql
Zerotier内网穿透 安装 在线安装zerotier curl -s https://install.zerotier.com | sudo bash 查看安装zerotier版本 sudo zerotier-cli status 加入一个netWork sudo zerotier-cli join ########## 2022-08-12 运维笔记
mysql查看历史执行语句(general log) 开启日志模式 说明: 开启 general log 将所有到达MySQL Server的SQL语句记录下来。 一般不会开启开功能,因为log的量会非常庞大。但个别情况下可能会临时的开一会儿general log以供排障使用。 1、临时开启设置,重启失效 SET GLOBAL log_output = 2022-07-30 Mysql