连接到ZooKeeper cd zookeeper路径/bin ./zkCli.sh -server 127.0.0.1:2181,127.0.0.2:2181, 查看Topic当前分区的offset值 #解释 ae_spark是我的Topic 0是我的分区 get /consumers/ae_spark/offsets/ae_spark/0 以上…
查看集群文件占用磁盘情况 hdfs dfs -du -h / 可清理的目录 /tmp /sparkhistoryserver 进入目录找到历史无用的文件 hdfs dfs -du -h /tmp hdfs dfs -du -h /sparkhistoryserver 删除无用的文件 hdfs dfs -rm -r /文件 清掉删除后移动到回收站的文…
这篇文章受密码保护,输入密码才能阅读
含义 命令 查看磁盘占用 du -h -d 1 查看磁盘占用 du -h -d 1