Apache Chukwa

Apache Chukwa se puede utilizar para registrar la actividad que tiene lugar en un sistema de computación distribuida Hadoop compleja.

Chukwa ayudará a los desarrolladores a localizar a los problemas y resolver errores en las aplicaciones de procesamiento de datos, proporcionando un conjunto de herramientas para no sólo el registro de todos los cálculos que se producen, sino también analizar, clasificar y luego se presentan los datos de resultado.

El proyecto está estrechamente integrado con la filosofía de MapReduce y ya que de forma nativa utiliza HDFS (Hadoop Distributed File System) que va a funcionar fuera de la caja con los proyectos Hadoop accionados.

lo que es nuevo en esta versión:

• Las nuevas características:
• migrar de la hormiga de experto.
• Las métricas añadido soporte para Hadoop 2 + 0.20.203.
• Añadido clúster escritura de cerdo resumen.
• Agregado digiere las medidas del sistema de SystemMetrics analizador demux.
• Configuración añadida para omitir la validación del esquema de HBase HBaseWriter.
• Actualización de archivos de configuración por defecto para utilizar Chukwa SocketAdaptor para Hadoop métricas de streaming.
• Configuración de corrección ortográfica.
• gráfica Implementado resto API y explorador gráfico para trazar los datos HBase al gráfico.
• Implementado Syslog Adaptador para mappig Syslog nombre de la instalación de tipo de datos Chukwa.
• Sustituido las medidas del sistema de recogida con Sigar.
• Agregado HBaseWriter para el almacenamiento de datos de series temporales en HBase de más rápido aleatoria de lectura / escritura.
• Haga procesadores predeterminado configurable.
• acciones de activación de conexión HTTP.
• Agregado JMSAdaptor.
• Soporte post-demux gatillo.

¿Qué hay de nuevo en la versión 0.6.0:

• Las nuevas características:
• migrar de la hormiga de experto.
• Las métricas añadido soporte para Hadoop 2 + 0.20.203.
• Añadido clúster escritura de cerdo resumen.
• Agregado digiere las medidas del sistema de SystemMetrics analizador demux.
• Configuración añadida para omitir la validación del esquema de HBase HBaseWriter.
• Actualización de archivos de configuración por defecto para utilizar Chukwa SocketAdaptor para Hadoop métricas de streaming.
• Configuración de corrección ortográfica.
• gráfica Implementado resto API y explorador gráfico para trazar los datos HBase al gráfico.
• Implementado Syslog Adaptador para mappig Syslog nombre de la instalación de tipo de datos Chukwa.
• Sustituido las medidas del sistema de recogida con Sigar.
• Agregado HBaseWriter para el almacenamiento de datos de series temporales en HBase de más rápido aleatoria de lectura / escritura.
• Haga procesadores predeterminado configurable.
• acciones de activación de conexión HTTP.
• Agregado JMSAdaptor.
• Soporte post-demux gatillo.

¿Qué es la nueva en la versión 0.4.0:

• La colección de secuencias de comandos shell en / bin ha sido comparación significativamente a la baja. Por ejemplo, en lugar de bin / agente, ahora debería decir bin / agente de Chuka.
• Ahora es posible desactivar la conexión remota al agente Chukwa. Esto hace Chukwa más adecuado para su uso en un despliegue de cara al cliente
• Chukwa ahora incluye un adaptador para la lectura de datos a través de un puerto UDP, el UDPAdaptor. Esto debería facilitar la integración con herramientas de registro del sistema y de legado similar.
• Se han producido una serie de correcciones de errores y limpieza de código a la versión anterior; compruebe el registro de cambios y JIRA para obtener más información.

Requisitos

• Java 1.6 o superior
• Apache Hadoop 0.20.205.1 o superior
• Apache HBase 0.90.4 o superior