Gestor de nodos de hilo en hadoop

Video: ¿Comó instalar #Hadoop #Yarn en modo cluster? parte2

Cada nodo esclavo En aún otro negociador de recursos (hilados) tiene un daemon Node Manager, que actúa como un esclavo para el administrador de recursos. Al igual que con la TaskTracker, cada nodo esclavo tiene un servicio que ata al servicio de procesamiento (Node Manager) y el servicio de almacenamiento (DataNode) que permiten Hadoop para ser un sistema distribuido.

Video: Bases de datos distribuidas de alta disponibilidad por Javier Ramírez

Cada Node Manager seguimiento de los recursos de procesamiento de datos disponibles en el nodo esclavo y envía informes periódicos al gestor de recursos.

Los recursos de procesamiento de un clúster Hadoop se consumen en trozos pequeños llamados contenedores. UN envase es una colección de todos los recursos necesarios para ejecutar una aplicación: núcleos de CPU, memoria, ancho de banda y espacio en disco. Un contenedor desplegado se ejecuta como un proceso individual en un nodo esclavo en un clúster Hadoop.

Video: Qué es Yarn, y cómo ayudará a mejorar la seguridad de Facebook - IIEMD

El concepto de un contenedor que puede recordar a una espacio, la unidad de manipulación utilizado por el JobTracker y TaskTracker, pero tienen algunas diferencias notables. Más significativamente, los contenedores son genéricos y pueden ejecutar cualquier lógica de la aplicación que se les da, a diferencia de las ranuras, que se definen específicamente para funcionar ya sea un mapa o reducir las tareas. Además, los recipientes se pueden solicitar con cantidades de recursos personalizados, mientras que las ranuras son uniformes.

Siempre y cuando la cantidad solicitada está dentro de los límites máximos de lo que es aceptable para un contenedor (y siempre que el importe solicitado de la memoria es un múltiplo de la cantidad mínima) y mínimo, el administrador de recursos otorgará y programar ese contenedor.

Video: Programación Varios

Todos los procesos de contenedor se ejecutan en un nodo esclavo se aprovisionan inicialmente, monitoreados y rastreados por daemon Node Manager de ese nodo esclavo.

Artículos Relacionados