Monitor Hadoop

    Monitor de Hadoop con facilidad

  • El almacenamiento distribuido y el procesamiento distribuido de grandes conjuntos de datos siempre han sido un desafío para los administradores de TI. Esta creciente necesidad de almacenar y procesar grandes conjuntos de datos de manera eficiente condujo al desarrollo del marco Hadoop. Con su gran capacidad de almacenamiento y su enorme capacidad de procesamiento, Hadoop permite a los usuarios gestionar conjuntos de datos cada vez mayores y realizar tareas fácilmente. Sin embargo, es importante garantizar el buen funcionamiento del marco de Hadoop. Con el Administrador de aplicaciones, es fácil obtener información operativa sobre su entorno de Hadoop, conectarse a los clústeres de Hadoop a través de la API REST o JMX, mantener un estado óptimo de los clústeres de Hadoop distribuidos y garantizar que sus clústeres estén disponibles y procesen las tareas con rapidez y precisión.

  • Hacer un seguimiento de la salud general de los clústeres de Hadoop.

    • Controle la disponibilidad y el estado de su sistema Hadoop.
    • Comprenda las estadísticas de su sistema de archivos distribuidos (DFS) (capacidad DFS, espacio usado, espacio libre y espacio usado no DFS)
    • Realice un seguimiento del crecimiento de archivos y directorios y evite cualquier posible problema debido a un crecimiento anormal en el número de archivos.
    • Realice un seguimiento del estado de los bloques (faltantes, dañados, etc.) para asegurarse de que los datos se almacenen de manera óptima en todo el DFS de Hadoop.
    Monitoreo de la aplicación
  • Supervisar el sistema de archivos distribuido Hadoop (HDFS).

    • Comprenda la capacidad y las tendencias de uso de HDFS mediante el seguimiento del estado de NameNode JVM y OS.
    • Recibir notificaciones cuando se incumplan los umbrales.
    • Supervise el estado de los DataNodes individuales y reciba notificaciones instantáneas cuando caen.
    • Realice un seguimiento de la memoria HDFS y reciba notificaciones en caso de falta de memoria.
    Monitoreo de la aplicación
  • Comprender el rendimiento de TaskTrackers o NodeManagers.

    • Realice un seguimiento del estado (vivo, muerto, en lista de grises, etc.) de TaskTrackers y ranuras en la versión 1.x de Hadoop de Hadoop MapReduce.
    • Vea el estado de la cola para determinar si las tareas se ejecutan perfectamente o si la cola está bloqueada.
    • Para la versión 2.x, haga un seguimiento del rendimiento del NodeManager desde el Hadoop Yarn.
    • Conozca los recuentos de nodos en diferentes estados como activo, dado de baja, insalubre y perdido.
    Monitoreo de la aplicación
  • Rastrea el estado de los trabajos o aplicaciones fácilmente.

    • Siempre tenga en cuenta cuántos trabajos o aplicaciones se están ejecutando en un momento dado.
    • Ordenar todos los puestos de trabajo o aplicaciones por sus estados.
    • Reciba notificaciones sobre la cantidad de trabajos o aplicaciones que han fallado, para que pueda tomar las medidas correctivas necesarias.
    Monitoreo de la aplicación
  • Informes y tableros.

    • Mantenga la información de gran alcance a su alcance. Visualice el uso y el rendimiento de los recursos de su clúster Hadoop con informes y paneles preconstruidos que muestran datos históricos y en tiempo real.

Descargue Applications Manager