tar命令批量解压方法
第一种： for tar in *.tar.gz; do tar xvf $tar; done
for tar in *.tar.bz2; do tar xvf $tar; done 第二种：用tar命令批量解压某个文件夹下所有的tar.gz文件 ls *.tar.gz | xargs -n1 t
Kafka手动设置offset
利用–reset-offsets进行设置，此方法要求*Kafka版本在0.11.以上 查询topic的offset的范围 #最小值
bin/kafka-run-class.sh kafka.tools.GetOffsetShell --broker-list AAA:9092 -topic test
设置Linux服务器登录密码过期时长
命令：chage 常用选项说明 -m：密码可更改的最小天数。参数为0代表任何时候都可以更改密码。 -M：密码保持有效的最大天数。参数为99999（5个9）代表一直有效,永不过期。 -l：列出当前的设置。查看指定用户确定用户的密码或帐号何时过期。 执行以下命令查看用户（以root为例）的密码有效时长
linux发送邮件
mailx 安装服务 yum -y install mailx 添加配置 vi /etc/mail.rc set from=xxxxxx@163.com set smtp=smtp.163.com set smtp-auth-user=xxxxxx@163.com set smtp-auth-pas
set命令使用
语法： set [-可选参数] [-o 选项] 一般 “-” 表示启用某个参数，“+” 表示取消某个set曾启动的参数。与-<参数>相反 功能说明 set 指令可根据不同的需求来设置当前所使用 shell 的执行方式，同时也可以用来设置或显示 shell 变量的值。当指定某个单一的选项时将设置 sh
查看HDFS压缩文件内容
不需要get到本地 直接查看压缩文件内容 hadoop fs -cat /2018-08-22/2018-08-22_log.lzo | lzop -dc | head -1
hadoop fs -cat /shining/temp.txt.gz | gzip -d
或
hadoop fs -ca
sasl认证客户端配置
消费者配置文件 bootstrap.servers=192.168.241.12:9092,192.168.241.13:9092,192.168.241.14:9092
sasl.jaas.config=org.apache.kafka.common.security.scram.ScramLog
linux 性能监控 sar命令
工具安装 yum install sysstat 语法格式 sar [ 选项 ] [ <时间间隔> [ <次数> ] ] sar -h 显示： -A:所有报告的总和
-b:显示I/O和传递速率的统计信息
-B:显示换页状态
-d:输出每一块磁盘的使用信息
-e:设置显示报告的结束时间
-f:从制定的