原因是CDH采集了virbr0这张网卡的信息导致的问题 通过ifconfig 可以看见有一个virbr的虚拟网卡 解决办法: 在该机器的配置中搜索 网络
文章内容来自尚硅谷文档 第1章 Ranger概述 1.1 什么是Ranger Apache Ranger是一个Hadoop平台上的全方位数据安全管理框架,它可以为整个Hadoop生态系统提供全面的安全管理。 随着企业业务的拓展,企业可能在多用户环境中运行多个工作任务,这就需要一个可以对安全策略进行集
开启队列 <property> <name>yarn.resourcemanager.scheduler.class</name> <value>org.apache.hadoop.yarn.server.resourcemanager.scheduler.capacity.Ca
修改过程 1,停掉hadoop集群。 2,拷贝原始logs路径下和tmp路径下的内容到新的路径下(目标路径)。其实删除tmp路径下内容也可以。 3,修改配置文件,hadoop-env.sh和core-site.xml。(如后文所示) 4,启动hadoop集群。 修改hadoop logs路径 在ha
hadoop jar /data/hadoop/hadoop-yum/share/hadoop/tools/lib/hadoop-streaming-2.7.2.jar \ -Dmapred.reduce.tasks=6 \ -Dmapred.map.tasks=25 \ -
hadoop version:3.3.4 hdfs dfsadmin -setQuota <N> <目录>...<目录> 将每个目录的名称配额设置为 N。每个目录都尽力而为,如果 N 不是正长整数、目录不存在或它是文件,或者目录将立即超过新配额,则会报告错误。 hdfs dfsadmin -cl
curl -s http://xxx.xxx.xxx.xxx:50070/jmx|egrep "RpcQueueTimeAvgTime|RpcProcessingTimeAvgTime"
[hadoop@n1 apache-tomcat-8.0.1]$ hdfs getconf hdfs getconf is utility for getting configuration information from the config file. hadoop getconf
hadoop version:3.2.3 <?xml version="1.0" encoding="UTF-8"?> <?xml-stylesheet type="text/xsl" href="configuration.xsl"?> <configuration> <property>
hadoop版本2.10.2 下载地址:https://www.apache.org/dyn/closer.cgi/hadoop/common/hadoop-2.10.2/hadoop-2.10.2.tar.gz zookeeper版本3.8.1 下载地址:
Hive
ElasticSearch
Kafka
hadoop
Mysql
Nginx
运维笔记