标签：国内 yarn size 磁盘 榜单 中国数据 中国 RoCE 自然语言处理技术
标题：DKhadoop大数据处理平台监控数据介绍1、Yarn监控界面
（1） 执行失败的应用程序
监控 yarn资源管理中总执行失败的应用程序数量
纵轴表示应用程序数量，单位个
横轴表示时间,单位分钟
（2）已提交的应用程序
监控 yarn资源管理中已提交的应用程序数量
纵轴表示应用程序数量，单位个
横轴表示时间,单位分钟
（3）正在运行的应用程序
监控 yarn资源管理中正在运行的应用程序数量
纵轴表示应用程序数量，单位个
横轴表示时间,单位分钟
（4） 等待执行的应用程序
监控 yarn资源管理中等待执行的应用程序数量
纵轴表示应用程序数量，单位个
横轴表示时间,单位分钟
（5）已完成的应用程序
监控 yarn资源管理中已完成的应用程序数量
纵轴表示应用程序数量，单位个
横轴表示时间,单位分钟
（6）被kill的应用程序
监控 yarn资源管理中被杀死的应用程序数量
纵轴表示应用程序数量，单位个
横轴表示时间,单位分钟
2、Spark监控界面
注意：（spark 运行任务后才有监控数据）
（1） 最大可使用内存
监控 Spark 集群中最大可使用的内存
纵轴表示内存容量，单位MB
横轴表示时间,单位分钟
（2）已使用的内存
监控 Spark 集群中已经使用的内存
纵轴表示内存容量，单位MB
横轴表示时间,单位分钟
（3）剩余内存
监控 Spark 集群中剩余的内存
纵轴表示内存容量，单位（MB）
横轴表示时间,单位分钟
（4）Spark中任务数量
监控 Spark 集群中任务数量
纵轴表示内存容量，单位MB
横轴表示时间,单位分钟
（5）Spark中正在运行的任务数量
监控 Spark中正在运行的任务数量
纵轴表示内存容量，单位MB
横轴表示时间,单位分钟
（6）正在运行的stage数量
监控 Spark集群中正在运行的stage数量
纵轴表示stage数量，单位个
横轴表示时间,单位分钟
（7）失败的stage数量
监控 Spark集群中运行失败的stage数量
纵轴表示stage数量，单位个
横轴表示时间,单位分钟
（8）准备就绪的stage数量
监控 Spark集群中准备就绪的stage数量
纵轴表示stage数量，单位个
横轴表示时间,单位分钟
备注：
（横轴的时间表示采集时间，一般是1分钟一次）
标签：国内 yarn size 磁盘 榜单 中国数据 中国 RoCE 自然语言处理技术
原文地址：http://blog.51cto.com/13636660/2160227
