此图显示了通过 Oracle Cloud Infrastructure 区域中的组件将企业应用、平面文件、事件和传感器数据从多个来源转换为数据使用者的可用洞察。
以下组件适用于整个 Oracle Cloud Infrastructure 区域:
该区域分为功能层,用于容纳物理或功能组件:
数据源层:数据共享提供商、设备、最终用户、事件、传感器、文件、任何类型的数据源以及企业应用。从企业应用数据库收集元数据并流入块监管(数据目录)。
Connect、Ingest、Transform 层:数据按批处理、API 和流摄取方式进行细化,并根据具体使用场景使用不同的服务。
标记为“批摄取”(OCI 数据集成、数据集成器、数据转换)的块可处理批量或微批量摄取和转换的数据。原始数据存储于对象存储中。
标记为基于 API 的摄取(OIC、ORDS、API 网关、函数)的块可处理摄取 API 的数据。原始数据存储于对象存储中。
标记为“实时摄取”(GoldenGate Service/OGG Marketplace) 的块可处理近乎实时摄取的数据。还可以使用批摄取组件提供的功能实时处理和细化摄取数据。原始和细化的应用程序数据沿着不同的路径传递到持久、整理和创建层。原始数据存储于对象存储中。
标记为“批量传输”(FastConnect、数据传输、存储网关、CLI、SDK、API)的块可处理批量(文件)数据,然后这些数据传输到云存储块。
流数据由标有流摄取(OCI Streaming、Service Connector Hub、Kafka Connect)的块摄取,然后流入云存储(对象存储)、流处理(OCI Golden Gate、Streaming Analytics)或流分析 (Golden Gate Stream Analytics)。
持久保存、整理和创建:数据持久保存在 Oracle Cloud Infrastructure Lakehouse 或 Object Storage 或两者中。它由 API 访问,用于分析、可视化和数据科学。
从数据共享中处理的数据和数据可以移动到标有 Serving (Oracle Cloud Infrastructure Lakehouse ) 的数据湖仓一体中的块中。数据湖仓一体还包括 Cloud/Storage/Date Lake(对象存储)。
其他处理由批处理(数据流、OCI 数据集成、数据集成器)、开源生态系统(大数据服务)和流处理(OCI GoldenGate Stream Analytics、OCI 数据流)提供。元数据传递到标记为“数据治理”(数据目录)的块。
分析、学习和预测层:数据湖仓数据由 Oracle Analytics Cloud 用于分析和可视化,数据科学和 AI 用于精简和预测,AI 和生成式 AI 服务,数据标签用于数据扩充,OCI Search 用于为人员和合作伙伴以及使用 API 的应用和物联网使用者提供结果。
数据湖仓一体和流数据可以使用反向 ETL 回写向应用和物联网使用者提供数据。
测量和行动层:数据共享收件人使用共享数据,人员和合作伙伴使用分析数据,而应用程序和物联网使用者使用精细数据。