当前位置: 首页 > 编程笔记 >

Bosun 用Bash编写的Hadoop HDFS磁盘使用情况

斜向文
2023-03-14
本文向大家介绍Bosun 用Bash编写的Hadoop HDFS磁盘使用情况,包括了Bosun 用Bash编写的Hadoop HDFS磁盘使用情况的使用技巧和注意事项,需要的朋友参考一下

示例

这是一个连续的收集器,使用该hadoop fs -du -s /hbase/*命令来获取有关HDFS磁盘使用情况的详细信息。该度量对于跟踪OpenTSDB系统中的空间非常有用。

#!/bin/bash
while true; do
    while read -r bytes raw_bytes path; do
        echo "hdfs.du $(date +"%s") $bytes path=$path"
        #https://community.cloudera.com/t5/Storage-Random-Access-HDFS/hdfs-du-format-change/td-p/27192 KMB 2015-08-24T12:01:20Z
        echo "hdfs.du.raw $(date +"%s") $raw_bytes path=$path"
    done < <(hadoop fs -du -s  /hbase/*)
    sleep 30
done
           

 类似资料:
  • cPanel磁盘使用情况是监控可用帐户和使用磁盘空间的一种非常有效的方法。 此功能会扫描磁盘,为您提供磁盘使用情况的图形概览。 它显示目录使用的磁盘空间,但不显示单个文件占用的空间。 它还显示MySQL数据库,隐藏目录和电子邮件使用的磁盘配额信息。 它有助于管理磁盘配额,因为一旦知道哪个目录具有最大的文件,就可以使用文件管理器导航到该目录并删除不必要的文件。 要访问此功能,请单击cPanel的“文

  • 我在用阿帕奇Kafka。我将巨大的dbs转储到Kafka中,其中每个数据库的表都是一个主题。 从经纪人处删除消费主题的正确方法是什么? 当前,我正在调用。但我找不到清晰的相关文件。方法签名不包含kafka服务器URL。这是否意味着我只删除了主题的元数据,而代理的磁盘使用量没有减少?那么当真正的附加日志文件删除发生时呢?

  • 本文向大家介绍SQL Server获取磁盘空间使用情况,包括了SQL Server获取磁盘空间使用情况的使用技巧和注意事项,需要的朋友参考一下 对于DBA来说,监控磁盘使用情况是必要的工作,然后没有比较简单的方法能获取到磁盘空间使用率信息,下面总结下这些年攒下的脚本: 最常用的查看磁盘剩余空间,这个属于DBA入门必记的东西: xp_fixeddrives方式有点是系统自带,可直接使用,缺点是不能查

  • 问题内容: 我可以看到Docker占用了12GB的文件系统: 但是,我怎么知道它如何分布在容器上? 我试图通过运行附加到容器(新的v1.3命令) 然后运行“ df -h”以分析磁盘使用情况。它似乎正在工作,但不适用于使用“ volumes-from”的容器。 例如,我为MongoDB使用了仅数据容器,称为“ mongo-data”。 当我运行,然后在容器中运行时,它表示安装在(我的“ mongo-

  • 我可以看到Docker占用了我文件系统的12GB: 但是,我如何知道这是如何分布在容器上的呢? 例如,我为MongoDB使用了一个只包含数据的容器,名为'mongo-data'。 当我运行,然后在容器内运行时,它说挂载在(我的“mongo-data”数据专用容器)上的文件系统使用11.3G,但当我执行时,它说它只使用2.1G。 那么,如何分析容器/卷磁盘使用情况呢?或者,在我的例子中,我如何找出'

  • 我有一个: 我已经使用以下代码将此图像保存到PNG文件中: 当代码执行时,它会创建一个具有400 DPI和168 MB磁盘大小的PNG文件;这太过分了。