Diseñe una plataforma de datos moderna para cargas de trabajo financieras
Este diseño explora el uso de Oracle Cloud Infrastructure para crear una plataforma de datos moderna (MDP) para cargas de trabajo financieras, como las que se utilizan para obtener estadísticas de fondos en tiempo real, detectar operaciones anómalas y para la limpieza, agregación y visualización de datos financieros generales.
Obtener información sobre la plataforma de datos moderna
Durante décadas, el volumen, la variedad y la tasa de crecimiento de los datos de consumidores y transacciones eran relativamente pequeños.
Sin embargo, con la llegada de Internet y los servicios en línea, un nuevo modelo de negocio global impulsado por nuevas aplicaciones e innovación constante ha producido datos para miles de millones de consumidores.
Los bancos, corredores y servicios financieros exigen soluciones de datos modernas y unificadas para gestionar el creciente volumen de datos, incluidos datos estructurados, semiestructurados y no estructurados. Para hacer crecer su negocio, los bancos desean estar basados en datos y, por lo tanto, necesitan modernizar su arquitectura de datos para proporcionar servicios de datos ágiles y adecuados tanto para datos pequeños como para big data.
Las fuerzas disruptivas de datos, como los big data y los datos en la nube, estimulan nuevas formas de pensar y capacitan a las organizaciones para desmantelar los silos y colaborar dentro de un ecosistema de datos democrático y en rápida evolución.
La arquitectura de datos va más allá de los límites organizativos y está pasando de centrarse en "mantener las luces encendidas" (datos operativos e inteligencia empresarial) a proporcionar estadísticas revolucionarias recopiladas de big data sin explotar.
En el centro de la banca basada en estadísticas se encuentra un entorno de datos moderno anclado en un modelo de arquitectura de datos adaptado a sus necesidades, denominado plataforma de datos moderna (MDP). La plataforma de datos moderna combina una amplia gama de servicios de Oracle Cloud Infrastructure que ingieren, procesan, almacenan, sirven y visualizan datos de orígenes estructurados y no estructurados.
La arquitectura de MDP muestra cómo una única plataforma de datos unificada puede cumplir los requisitos más comunes para:
- Pipelines de datos relacionales tradicionales
- Transformaciones de big data
- Ingestión y enriquecimiento de datos no estructurados con funciones basadas en IA
- Ingestión y procesamiento de flujos con la arquitectura Lambda
- Estadísticas útiles para aplicaciones basadas en datos y visualización de datos enriquecida
- Establecimiento de una única fuente de datos para toda la empresa, que consta de un almacén de datos para datos estructurados y un lago de datos para datos semiestructurados y no estructurados
- Integración de orígenes de datos relacionales con otros conjuntos de datos no estructurados mediante tecnologías de procesamiento de big data
- Uso de modelos semánticos y potentes herramientas de visualización para simplificar los análisis de datos
Consideraciones para la plataforma de datos moderna
Al implantar soluciones con la plataforma de datos moderna, siga las mejores prácticas para sistemas de procesamiento de datos avanzados, como el uso de un sistema de gestión de bases de datos relacionales (RDBMS) para el procesamiento de datos estructurados y big data para datos no estructurados.
Al diseñar la solución, tenga en cuenta las siguientes consideraciones:
- Proporcionar para casos de uso de datos de lote y transmisión
- Incorpore casos de uso de inteligencia artificial y aprendizaje automático para cargas de trabajo de análisis.
- Garantía de calidad de los datos, control de versiones de datos y linaje de los mismos
- Incluya la integración con entornos locales y con otras infraestructuras en la nube para respaldar entornos multinube e híbridos.
La plataforma de datos moderna es una plataforma de datos unificada y única que puede usar para configurar un hub de datos de toda la empresa que sirva como una única fuente de datos para satisfacer los requisitos de datos más comunes.
- Para fines específicos: cree una plataforma o arquitectura de datos moderna que se adapte a sus necesidades de arquitectura actuales y posicione a su organización para aprovechar las oportunidades en el espacio de gestión de la información según se presenten.
- Mejora incremental: construir una plataforma de datos moderna y optimizada para la empresa no se producirá de la noche a la mañana; llevará tiempo y esfuerzo. Utilice nuestras evaluaciones de diagnóstico, aceleradores y mejores prácticas para ayudarle a evaluar las capacidades de arquitectura de datos actuales, identificar los objetivos de datos modernos y diseñar iniciativas que le permitan cerrar las brechas entre ellos.
- Mantenga la alineación de su negocio: a medida que crea sus soluciones de datos modernas, tenga en cuenta su visión estratégica y sus prioridades. Un fallo común de la arquitectura de datos tradicional es que las iniciativas dentro de ellas a menudo fallan o no proporcionan un valor de negocio claro. Mantener sus planes de iniciativa alineados con los requisitos y consideraciones del negocio ayudará a conseguir la aceptación y demostrar el valor de la arquitectura de datos moderna, así como las iniciativas más estratégicas más grandes en su hoja de ruta.