El proyecto de integración de datos de $0

Estoy seguro de que se sorprenderá (¡sorprendido!) al saber que esta integración no fue tan simple como el vendedor pensaba. De hecho, este trabajo internamente nos costó más de $40,000 desarrollar. Y no, el vendedor no ayudó con la codificación.

Esta historia me vino a la mente cuando conocí a Attunity, la adquisición más reciente de Qlik. Ha permitido a Qlik introducir nuestra Plataforma de Integración de Datos, una combinación de productos de Attunity y Qlik Data Catalyst.

Hay mucho más en la integración de datos de lo que uno podría pensar. Por ejemplo, IDC dice que "el software de integración de datos emplea una amplia gama de tecnologías. Estos incluyen, pero no se limitan a, conectividad de datos; extracción, carga y transformación (también conocido como ELT); captura de datos de cambio (CDC), mediación semántica y de formato, federación y virtualización de datos, calidad y perfil de datos, administración de datos maestros, administración de metadatos y tecnologías de preparación e integración de datos de autoservicio".

Whew! Eso es mucho más que simplemente mover los datos de un lugar a otro!

Entonces, ¿cómo se compara esta definición de IDC con las capacidades de la Plataforma de Integración de Datos de Qlik?

Conectividad de datos - La plataforma de integración de datos de Qlik soporta la conectividad con más de 100 fuentes de datos diferentes y todas las principales pilas de tecnología para los proveedores públicos de cloud computing.

Extraer, cargar y transformar (también conocido como ELT) - La plataforma de integración de datos de Qlik puede extraer, integrar y transformar automáticamente los datos.

Captura de datos de cambio (CDC) - La plataforma de integración de datos de Qlik incluye CDC en tiempo real que no requiere agentes y está basada en registros, por lo que el impacto en los sistemas de producción es mínimo.

Formato y mediación semántica - Los usuarios pueden definir un flujo de trabajo y reglas dentro de la Plataforma de Integración de Datos de Qlik para transformar automáticamente los datos basándose en ciertos formatos o patrones.

Federación y virtualización de datos - La plataforma de integración de datos de Qlik puede escanear los datos para definir los metadatos asociados y construir un perfil completo sin transferir los datos en sí.

Calidad y perfilado de datos - Cuando los datos se incorporan a la plataforma de integración de datos de Qlik, los elementos de datos pueden perfilarse para comprender y reportar la limpieza de los datos.

Gestión de metadatos - Crear un catálogo de datos inteligente que documente cada aspecto de sus datos es una parte clave de la plataforma de integración de datos de Qlik. Esto incluye la gestión de metadatos técnicos, comerciales y operativos para que cada elemento de datos sea comprensible y procesable.

Tecnologías de autoservicio de preparación e integración de datos - Los usuarios pueden crear flujos gráficos de preparación de datos para generar nuevos conjuntos de datos.

Por lo tanto, la próxima vez que escuche el término Integración de datos, tenga en cuenta que es mucho más que simplemente mover los datos. Y tenga cuidado a quién le pregunte al estimar el esfuerzo.

¿Está interesado en saber más sobre la Plataforma de Integración de Datos de Qlik? Echa un vistazo a esta página.