Las opciones de comando dfsadmin hadoop
los dfsadmin herramientas son un conjunto específico de herramientas diseñadas para ayudar a erradicar las informaciones acerca de su sistema de archivos distribuido Hadoop (HDFS). Como bono adicional, puede utilizarlos para realizar algunas operaciones de administración en HDFS también.
Opción | Que hace |
---|
-informe | Proporciona información básica del sistema de archivos y estadísticas. |
-safemode entrar | dejar | conseguir | espere | Administra a salvo modo, un estado NameNode en que los cambios de espacio de nombre enel no se aceptan y bloques puede neitherreplicated ni borrar. El NameNode está en modo seguro duringstart arriba para que no se inicia prematuramente replicatingblocks a pesar de que ya son suficientes réplicas en thecluster. |
-refreshNodes | Fuerza la NameNode volver a leer su configuración, incluyendo eldfs.hosts.exclude archivo. Los NameNodedecommissions nodos después de sus bloques se han replicado ontomachines que permanecerán activos. |
-finalizeUpgrade | Completa el proceso de actualización HDFS. DataNodes y la NameNodedelete directorios de trabajo de la versión anterior. |
-estado upgradeProgress | detalles | vigor | Pide a la norma o estado actual detallado de actualización thedistributed, o las fuerzas de la actualización para proceder. |
-nombre metasave | Guarda estructuras de datos principales de la NameNode a Nombre del archivo en un directorio that'sspecified por el hadoop.log.dir property.File Nombre del archivo, que isoverwritten si ya existe, contiene una línea por cada ofthese artículos: a) DataNodes que están intercambiando latidos con theNameNode- b) bloques que están esperando a ser c) reproduce- blocksthat están siendo reproduce- y d) los bloques que están esperando para bedeleted. |
-setquota ... | Establece un límite superior en el número de nombres de la directorytree. Puede establecer este límite (un entero largo) para uno o moredirectories simultáneamente. |
-clrQuota... | Borra el límite superior del número de nombres de la directorytree. Puede borrar este límite para una o más directoriessimultaneously. |
-restoreFailedStorage true | falsa | cheque | Activa o desactiva los intentos automáticos para restaurar réplicas failedstorage. Si una ubicación de almacenamiento no se hace availableagain, el sistema intenta restaurar ediciones y la fsimage en un puesto de control. La opción de verificación devuelve la configuración actual. |
-ayudar a [cmd] | Muestra información de ayuda para el comando dado o para allcommands si no se especifica. |
Sobre el autor
Hadoop distribuido sistema de archivos (HDFS) alta disponibilidad A menudo en la infancia de Hadoop, una gran cantidad de debate se centra en la representación de la NameNode de un único punto de fallo. Hadoop, en general, ha tenido siempre una arquitectura robusta y el fracaso-tolerante, con la excepción de…
Hadoop de archivos distribuido comandos de shell del sistema los Shell Hadoop es una familia de comandos que se pueden ejecutar desde la línea de comandos del sistema operativo. La concha tiene dos conjuntos de comandos: uno para la manipulación de archivos (similar en propósito y la sintaxis de los…
Hadoop para dummies los Shell Hadoop es una familia de comandos que se pueden ejecutar desde la línea de comandos del sistema operativo. La concha tiene dos conjuntos de comandos: uno para la manipulación de archivos (similar en propósito y la sintaxis de los…
Hadoop sistema de archivos distribuido (HDFS) para proyectos de grandes volúmenes de datos El sistema de archivos distribuido Hadoop es un resistente, enfoque versátil, agrupadas a la gestión de archivos en un entorno de datos grande. HDFS no es el destino final de los archivos. Más bien, es un servicio de datos que ofrece un conjunto…
Entrada divide en MapReduce de Hadoop La forma HDFS se ha establecido, se descompone muy grandes archivos en bloques grandes (por ejemplo, la medición de 128 MB), y almacena tres copias de estos bloques en diferentes nodos del clúster. HDFS no tiene conciencia del contenido de estos…
Lleve un registro de los bloques de datos con NameNode en HDFS El NameNode actúa como la libreta de direcciones para Hadoop Distributed File System (HDFS), ya que no sólo sabe que bloquea constituyen archivos individuales, sino también el lugar donde se almacenan cada uno de estos bloques y sus réplicas.…
La gestión de grandes datos con Hadoop HDFS y MapReduce: Hadoop, un marco de software de código abierto, utiliza HDFS (el sistema de archivos distribuido Hadoop) y MapReduce para analizar grandes volúmenes de datos en clústeres de hardware que la mercancía es, en un entorno de computación…
Gestión de archivos con los comandos del sistema de archivos hadoop HDFS es uno de los dos componentes principales de la Hadoop de armazón y el otro es el paradigma computacional conocido como MapReduce. LA sistema de archivos distribuido es un sistema de archivos que gestiona el almacenamiento a través de un…
Nodos Máster en racimos de Hadoop Los nodos principales en racimos de Hadoop distribuidos reciban a los diferentes servicios de almacenamiento y gestión de procesamiento, que se describen en esta lista, por todo el clúster Hadoop. La redundancia es fundamental para evitar los…
Replicar los bloques de datos en el sistema de archivos distribuido hadoop Hadoop Distributed File System (HDFS) está diseñado para almacenar datos en barato y más fiable, hardware. Barato tiene un anillo atractivo a la misma, pero plantea preocupaciones sobre la fiabilidad del sistema en su conjunto, especialmente para…
Errores de nodo y disco esclavo en HDFS Al igual que la muerte y los impuestos, fallos de disco (y dado el tiempo suficiente, incluso errores de nodo o bastidor), son inevitables en Hadoop Distributed File System (HDFS). En el ejemplo mostrado, incluso si un rack fallara, el grupo podría…
Nodos esclavos en el sistema de archivos distribuidos Hadoop (HDFS) En un clúster Hadoop, cada nodo de datos (también conocido como un nodo esclavo) Se ejecuta un proceso de fondo llamado DataNode. Este proceso de fondo (también conocido como una demonio) Comprueba los trozos de datos que el sistema almacena en…