En caso de utilizar herramientas o código personalizado?
En los primeros días de almacenamiento de datos, la mayoría de las organizaciones manejan servicios de middleware a través de codificación personalizada, más que con las pocas herramientas disponibles en el momento, como se muestra en este ejemplo:
Una organización escribe un programa en un lenguaje de programación como COBOL, o tal vez en un entorno como el SAS, para manejar los extractos de datos a partir de una fuente de datos de mainframe y luego hacer la comprobación de control de calidad y la transformación.
Un servicio de transferencia de archivos, tales como FTP estándar (File Transfer Protocol), se utiliza para copiar el transformado y " limpiado " datos a la máquina en la que el almacén de datos residirá.
Llanura SQL de edad, o una utilidad de carga a granel, se utiliza para cargar una base de datos relacional con los nuevos (o actualizadas) contenido del almacén de datos.
No hay nada malo con este enfoque programático. Siempre determinan para su entorno específico ya sea de codificación o herramientas personalizada son los " derecho " camino a seguir. No asuma automáticamente que usted debe poner en práctica su almacén de datos mediante el uso de herramientas de middleware.
Sin embargo, su equipo podría encontrar replicar la lógica reutilizable integrada en la mayoría de herramientas de middleware muy caros. Y, además, se pueden encontrar herramientas de código abierto (libre) de middleware disponibles, por lo que el argumento de " vamos a ahorrar dinero mediante el uso de los recursos internos " muy difícil de justificar. Por lo tanto, la mayoría de las implementaciones de hoy se realizan utilizando Extraer, Transformar, y Carga (ETL) herramientas.
-
Hadoop y colmena -
Hadoop como un motor de pre-procesamiento de datos -
Servicios EII adicionales para almacenamiento de datos -
Clasifique su almacén de datos -
Extracción de los datos, el movimiento y la carga de data warehouse suprema -
Fuentes de datos y herramientas de inteligencia de negocios para almacenamiento de datos suprema
Almacén de datos: fuentes de datos fuente Un almacén de datos es, por su propia naturaleza, un almacén de datos física distribuida. Distribución de sus activos de información ayuda en el rendimiento y la facilidad de uso a través de sistemas y en toda la empresa. Hacer este nivel de…
El almacenamiento de datos: almacén de datos operativos (ODS) Algunas definiciones de un ODS lo hacen parecer como un almacén de datos clásica, con periódicas (batch) aportaciones de diversas fuentes operativas en las SAO, excepto que las nuevas entradas de sobrescribir los datos existentes.En un banco, por…
Asegúrese de que sus implementaciones son únicos No hay dos implementaciones de almacenamiento de datos son exactamente iguales. Un almacén de datos se compone de muchos componentes diferentes, cada uno de los cuales se pueden implementar en varios (quizá muchas) formas. Estos componentes…
Cómo fabricar activos de datos LA almacén de datos es una casa para sus datos de alto valor, o los activos de datos. La mayoría de las organizaciones a construir un almacén de datos para los activos de datos fabricados de una manera relativamente sencilla, siguiendo estos…
Capa 3 de la pila de datos grande: la organización de los servicios y herramientas de datos La organización de los servicios de datos y herramientas, la capa 3 de la pila de datos grande, capturar, validar, y montar varios elementos de datos grandes en colecciones contextualmente relevantes. Dado que los datos de grande es masiva, las…
Servicios Middleware: el movimiento de datos y carga de datos En la mayoría de las situaciones, los dos servicios de middleware - selección y extracción, y el aseguramiento de la calidad - se llevan a cabo en el mismo plataforma (sistema) en el que reside la fuente de datos. Si el almacén de datos se…
Middleware para el almacenamiento de datos Middleware es un software informático que conecta los componentes de software. En un entorno de almacenamiento de datos, los servicios de middleware son el conjunto de programas y rutinas que hacen lo siguiente:Extraer datos de la fuente (o…
Servicios de middleware: selección de datos y extracciones El propósito principal de la selección de datos y el servicio es -extracción seleccionar a partir de (encontrar en) una fuente de datos los datos que desea mover en el almacén de datos y después extracto (sacar) que los datos en una forma que…
Servicios de middleware: mapeo de datos y transformación Esta figura muestra un entorno en el cual los datos se extrae a partir de tres fuentes de datos diferentes para su inclusión en un almacén de datos, y cada una de las tres fuentes es en una plataforma diferente. En algún momento del proceso de…
Servicios de replicación de almacenamiento de datos Servicios de middleware de replicación combinan la selección y la extracción, el movimiento y la carga de una base de datos para uno o más otros, por lo general gestionadas por un solo producto DBMS. (La base de datos de origen y todos los…
Seis proveedores con productos de middleware para el almacenamiento de datos Hay varios proveedores que ofrecen datos de los productos de middleware de almacenamiento es posible que desee echar un vistazo a. Aquí hay siete que son vale la pena considerar.Composite SoftwareComposite Software proporciona integración de…
Los Lite almacenamiento de datos Un lite almacén de datos es un sin lujos, escueto, el enfoque de baja tecnología para proporcionar datos que pueden ayudar con algunos de su toma de decisiones empresariales. No había lujos significa que pones juntos, siempre que sea posible, las…