Pares de valores clave en el modelo de datos HBase
El modelo de datos HBase lógica es simple pero elegante, y proporciona un mecanismo de almacenamiento de datos natural para todo tipo de datos - conjuntos de datos grandes, especialmente estructurados. Todas las partes del modelo de datos convergen en un par clave-valor.
En primer lugar, en un mundo donde se puede pensar en la clave de fila como la clave principal para los datos almacenados en HBase, ¿cómo termina aprovechando el resto de los componentes del modelo de datos? Bueno, todo depende de la cantidad de datos que desea obtener en las consultas y cuánto tiempo está dispuesto a esperar.
Especificación sólo la clave fila potencialmente puede devolver un montón de datos, porque una fila individual puede tener millones de columnas. Además, con sólo la clave de fila para poder trabajar, HBase puede volver cada calificador columna, la versión y valor relacionado con la tecla fila.
¿Qué pasa si desea que sólo una columna en particular o la versión de sus datos? Desde el ejemplo mostrado, se puede ver lo que pasa si quieres sólo el último nombre de un cliente en particular? La solución es construir una clave más compleja para especificar exactamente lo que necesita. Un par clave-valor puede tener este aspecto: RowKey: (Columna Familia: Columna Calificador: Version) => Valor
| Fila clave | Columna Familia: {Columna Calificador: Versión: Valor} |
|---|---|
| 00001 | CustomerName: {'FN': 1383859182496: 'John', 'LN': 1383859182858: 'Smith', 'MN': 1383859183001: 'Timoteo', 'MN': 1383859182915: 'T'} ContactInfo: {'EA': 1383859183030:'[email protected] ', 'SA': 1383859183073: «1 Hadoop Lane, NY11111 '} |
| 00002 | CustomerName: {'FN': 1383859183103: 'Jane', 'LN': 1383859183163: 'Doe', Datos de contacto: { 'SA': 1383859185577: «7 HBase Ave, CA22222 '} |
Después de especificar la clave, el resto es opcional. Cuanto más específico usted hace la consulta, sin embargo (que se mueve de izquierda a derecha), el más detallado de los resultados. Su desempeño va a empeorar, ya que el sistema tiene que pasar más tiempo localizar el valor exacto o valora usted necesita, pero menos datos se devuelven al finalizar la consulta.
Así teclas son más complejos de lo que imaginas de estudiar la tabla. Por ejemplo, si desea que el segundo nombre más reciente (o el único nombre medio hasta ahora) del cliente en la fila '00001', el par clave-valor resultante sería el siguiente: '00001: CustomerName: MN' => ' Timoteo '
Recuerde que las versiones se implementan utilizando las marcas de tiempo de forma predeterminada y se ordenan en orden decreciente de manera que se obtiene automáticamente el valor más reciente, si no se especifica una versión. Si quieres una inicial del segundo antes de su cliente (consulte la Tabla 12-2), su par clave-valor resultante sería el siguiente: '00001: CustomerName: MN: 1383859182915' => 'T'
Esperamos que las diversas descripciones de HBase están empezando a tomar forma en su mente. Específicamente, HBase es tanto una familia orientada almacén de datos de la columna y un almacén de datos clave-valor de par. Haciendo referencia a la HBase simplemente como una " orientado columna " almacén de datos deja mucho a la imaginación.
En caso de que usted era curioso, no hay tipos de datos de HBase - valores en HBase son sólo uno o más bytes. Una vez más, simple pero potente, ya que puede almacenar cualquier cosa!
Importación de datos en HBase con Sqoop Sqoop se puede utilizar para transformar un esquema de base de datos relacional en un esquema HBase. Por supuesto, el objetivo principal aquí es demostrar cómo Sqoop puede importar datos de un RDBMS o almacén de datos directamente en HBase, pero…
Tiendas de valores clave en nosql Clave # 8208-valor tiendas NoSQL tienen un registro con un campo de identificación - la clave en # 8208-valor almacenes de claves - y un conjunto de datos. Estos datos pueden ser uno de los siguientes:Una pieza arbitraria de datos que interpreta…
Regiones en HBase RegionServers son una cosa, pero también hay que echar un vistazo a cómo funcionan las distintas regiones. En HBase, una mesa es a la vez la propagación a través de una serie de RegionServers además de estar constituida por regiones…
Regionservers en HBase RegionServers son los procesos de software (a menudo llamados demonios) que activan para almacenar y recuperar datos en HBase (Hadoop base de datos). En entornos de producción, cada RegionServer se implementa en su propio nodo de cómputo dedicado.…
Claves de fila en el modelo de datos HBase Almacenes de datos HBase constan de una o más tablas, que están indexados por claves de fila. Los datos se almacenan en filas con columnas y filas puede tener múltiples versiones. Por defecto, el control de versiones de filas de datos se…
Almacene grandes datos con HBase HBase es una no relacional (columnar) base de datos distribuida, que utiliza HDFS como su almacén de persistencia para proyectos de grandes datos. Es el modelo de Google BigTable y es capaz de albergar mesas muy grandes (miles de millones de…
El almacenamiento de datos en bigtables Un Bigtable tiene mesas al igual que un RDBMS hace, pero a diferencia de un RDBMS, unas mesas BigTable generalmente no tienen relaciones con otras tablas. En cambio, los datos complejo se agrupa en una sola tabla.Una mesa en un Bigtable consiste en…
Almacenamiento de datos estructurados y procesamiento de Hadoop Al considerar las capacidades de Hadoop para trabajar con datos estructurados (o trabajar con datos de cualquier tipo, para el caso), recuerda las características fundamentales de Hadoop: Hadoop es, ante todo, una plataforma de almacenamiento y…
Los atributos de HBase HBase (Hadoop base de datos) es una implementación Java de BigTable de Google. Google define como un BigTable " escasa, distribuida, persistente mapa Ordenado multidimensional ". Es toda una definición concisa, pero también estará de acuerdo que…
El ecosistema de clientes HBase HBase está escrito en Java, un lenguaje elegante para la construcción de tecnologías distribuidas como HBase, pero la cara él - no todo el mundo que quiera aprovechar las innovaciones HBase es un desarrollador Java. Es por eso que hay un rico…
Bases de datos de columna en un entorno de datos grande Bases de datos de columnas pueden ser muy útiles en su proyecto de datos grande. Bases de datos relacionales son fila orientada, como los datos en cada fila de una tabla se almacena junto. En una columnar, o base de datos orientada a columnas, se…
Añadir datos mysql una fila a la vez Si usted tiene una pequeña cantidad de datos para añadir a su base de datos MySQL, puede agregar una fila a la vez a la mesa. Scripts PHP a menudo tienen que añadir una fila a la vez. Por ejemplo, cuando un script PHP acepta los datos de un…