OCI GoldenGate 大小與容量規劃指南
使用本指南規劃 Oracle Cloud Infrastructure (OCI)、Microsoft Azure 及 Google Cloud 上的受管理資料複寫部署。
本文提供 OCI GoldenGate 資料複製部署的基準資源和處理大小調整準則。您和您的導入團隊可以將其作為結構化的起點,用於選擇部署容量,並開始進行組態設定和整合測試。
OCI GoldenGate 是 OCI、Microsoft Azure 和 Google Cloud 上提供的受管理 Oracle 雲端服務。您可以選取部署容量並設定複寫處理作業。Oracle 營運基礎服務基礎架構。來源資料庫資源、目標資料庫效能、網路連線及複製組態仍是端對端容量計畫的一部分。
本文涵蓋:
- OCI GoldenGate 在 OCI、Azure 和 Google Cloud 上管理資料複製部署。
- 支援的 Oracle Database 和非 Oracle 關聯式來源和目標,使用部署技術,並在所選的雲端和區域中建置。
- 擷取、分送路徑、接收端路徑以及每個受管理部署內的 Replicat 容量。
- 歷程檔保留、復原存量 (Backlog)、網路需求,以及生產代表大小驗證。
此文章未涵蓋:
- 自行管理的 GoldenGate 安裝在實體伺服器、虛擬機器或 Kubernetes 上。
- 資料轉換、資料驗證和串流分析需要不同的容量模型。
- 資料庫硬體規模與複雜聯合或主動 - 主動架構的詳細設計。
對於混合拓樸,請根據其作業模型調整每個元件的大小。即使將變更傳送至 OCI GoldenGate,客戶管理的來源端 Extract 仍需要主機和資料庫容量。
注意:本文件提供基準大小調整指南,但不保證效能、擴展性或容量。實際資源使用量因交易量、交易大小、轉換、拓樸、延遲需求及目標效能而異。在部署到生產環境之前,先使用生產代表性工作負載完成概念驗證。
在初次測試時提供合理的空間。規模過小的部署可能會面臨資源壓力、軌跡成長、複寫延遲或處理不穩定。先監督限制階段,再增加資源或平行程度。
這些建議的基礎
本文件中的大小建議不是以單一基準或合成工作負載為基礎。GoldenGate 會處理廣泛的交易設定檔、資料模型和複製拓樸,因此沒有單一傳輸量圖形可以代表所有客戶環境。
相反地,本文件的指導會反映下列項目的組合:
- Oracle Product Development 效能測試和擴展性驗證活動
- Oracle Support 與效能工程調查
- 從客戶導入觀察的部署模式
- Oracle 諮詢與現場工程經驗
- 來自生產環境 GoldenGate 的作業最佳實務
這些建議為基礎架構佈建和部署規劃提供實用的起點。實際的資源需求取決於工作負載特性,包括交易量、交易大小、重做產生率、延遲需求、轉換複雜性、網路條件以及目標系統效能。
客戶應將這些建議視為基準指導,並在生產部署前透過概念驗證測試和作業監控進行驗證。
工作量分類層級
選取調整大小設定檔之前,請先使用下表將工作負載分類。這些標籤說明規劃複雜性,不會將重做速率或表格計數對應至保證的 OCPU 需求。當需求不同時,請測試最繁忙的持續期間和復原工作負載。
| 屬性 | 小型 | 中 | 大型 | 超大型 |
|---|---|---|---|---|
| 目標工作負載設定檔 | 開發 / QA 或低音量 | 部門 OLTP | 企業 OLTP/DW | 大量或複雜的拓樸 |
| 每小時的平均重做 (GB) | 小於 1 GB | 1-100 GB | 100-300 GB | > 300 GB |
| 複製範圍 | 有限的來源和目標範圍 | 數個工作負載分割區 | 多個來源或目標 | 高並行性或廣泛的扇出 |
| 強調大小 | 功能驗證 | 持續需求 | 尖峰和復原容量 | 分割和失敗界限 |
注意:資料庫大小、TPS (每秒交易數) 和表格計數不是可靠的資源使用預測程式。個別收集來源重做 / 日誌位元組、交易特性、擷取的歷程檔位元組,以及配線流量。對於 Oracle 來源,請使用 DBA 驗證重做測量值,並避免多次計算重複的存檔日誌複本或 RAC 繫線。
正在起始調整工作流程大小
-
測量來源工作負載。
- 收集重做產生率。
- 瞭解交易特性。
- 識別來源與目標計數。
-
選取工作負載設定檔。
- 使用「工作量分類層」表來識別必要的測試案例。
-
- 選取基本 OCPU 和自動調整。確認雲端、區域、建置和儲存限制。
-
設定 GoldenGate。
-
建立監督基準。
- 從第一天開始擷取使用的 OCPU、記憶體、處理作業延遲及歷程檔成長。
-
驗證大小。
- 執行一般、持續的尖峰、初始負載和停機復原工作負載。
-
視需要調整資源。
- 變更限制資源或支援的處理作業設定,然後重複測試。
運算與 儲存規模調整
OCI GoldenGate 會將資源配置給受管理的部署。下表彙總基本組態範例與記錄配置模型。開發和生產價值是初始規劃指引。較大的值為組態範例,而非工作負載層建議。
大小理念:
- 從服務基準與並行處理需求開始,然後驗證實際需求。
- 在來源變更繼續期間,提供尖峰、大型交易、維護和追加空間。
- 獨立調整每個部署的大小,並保留個別的來源資料庫和目標資料庫容量計畫。
| 資源 | 開發 / 測試 | 生產開始 | 較大範例 | 最大基準 |
|---|---|---|---|---|
| 基準 OCPU | 1 | 4 | 8 | 24 |
| 基準記憶體配置 | 16 GB | 64 GB | 128 GB | 384 GB |
| 基礎網路配置 | 1 Gbps | 4 Gbps | 8 Gbps | 24 Gbps |
| 儲存 (歷程檔、其他檔案) | 500 GB | 2 TB | 4 TB | 12 TB |
OCPU 指南
- Oracle 建議從 1 個 OCPU 開始進行開發 / 測試,再從 4 個 OCPU 開始進行生產。視需要啟用自動調整功能,以處理尖峰工作負載。您也可以手動擴大或縮小部署規模。
- 自動調整最多可使用 3 倍的基礎 OCPU,上限為 24 個 OCPU。在選取的組態測試持續的需求和復原。
- 從每個並行 Extract、Replicat 或 Distribution Path 的 1 個 OCPU 開始,作為處理作業規劃指南。在測試期間調整 OCPU 數目。
- 擷取 CPU 的需求會隨著擷取的變更、交易特性、篩選、轉換以及來源探勘而有所不同。
- Oracle 也建議為使用者介面配置 1 個 OCPU。
記憶體指引
- 每一 OCPU 的服務配置為 16 GB 的記憶體。驗證記憶體壓力以及消耗的運算和暫時空間需求。
- 記憶體需求取決於未確認的交易資料、長時間執行的交易、LOB、並行處理及溢滿活動。提供空餘空間,直到代表測試建立需求為止。
- 每個 Big Data 處理程式預設通常使用 8 GB 的記憶體。確定已適當調整
jvm.bootoptions堆集設定值 (-Xmx和-Xms) 的大小,以防止尖峰負載發生OutOfMemory錯誤。 CACHEMGR在內部進行自我配置和自我調整。在變更快取大小控制項之前,請保留預設值並諮詢 Oracle Support。- 整合式 Extract 使用來源資料庫日誌探勘伺服器和串流集區。增加服務 OCPU 並不會增加來源 SGA 容量。
- Database Parallel Replicat 使用對應器、主要及 Appliers。評估處理作業和目標資料庫記憶體,而不是套用一般的 JVM-heap-per-thread 預估。
儲存和 I/O 指南
- 儲存和檔案系統實作是服務管理的。客戶可以規劃保留和復原容量,而不是選取磁碟類型、掛載點或 IOPS。
- 計算每個部署內的每個實體歷程檔複本,並為報表、捨棄檔案、暫時溢出、作業檔案及備份相關需求保留空間 (如果適用)。
- 請注意,初始載入歷程檔通常比一般歷程檔耗用更多的儲存空間。
歷程檔保留原則
對業務復原目標、作業程序以及下游系統預期最長停機持續時間的基準歷程檔保留。必要的視窗也必須涵蓋重新啟動、追加、操作員回應以及任何其他重新執行需求。
啟動保留目標範例:
| 部署類型 | 建議的歷程檔保留 |
|---|---|
| 開發 / QA | 4-8 小時 |
| 生產 (單一目標) | 24 小時 |
| 生產 (關鍵工作負載) | 48-72 小時 |
| 跨區域 /WAN 部署 | 72+ 小時 |
- 啟用即時歷程檔的檢查點保護,並驗證所有 Extract、Distribution、Receiver 和 Replicat 使用者。
- 永久清除作業會刪除適用的檔案。
- 確認來源日誌保留和歷程檔保留,讓擷取能夠在需要的位置重新啟動。
這些是開始目標的範例。選取的視窗必須涵蓋實際的復原程序,而且必須符合確認的部署儲存限制。
歷程儲存計算
調整歷程檔儲存大小時,請說明:
- 尖峰路徑產生率 x 保留期間 x 安全係數
- Oracle 建議至少套用 1.5x 的最低安全因素,以因應工作負載激增、維護時段及未預期的目標中斷情況。
- 請勿只依據時效永久清除歷程檔。只有在所有順流 Replicat 處理作業都已順利處理必要的歷程檔資料,且其檢查點位置在您計畫移除的檔案之外,才將檔案永久清除。
- 對於關鍵業務環境,保留應足以允許從計畫性維護活動、目標資料庫中斷、網路中斷及疑難排解調查進行復原,而無需重新定位或重新建立目標系統。
使用此公式:
Required Trail Storage = Peak Trail GB/hour x Retention Hours x Safety Factor
範例:100 GB/ 小時 x 24 小時 x 1.5 = 3,600 GB (3.6 TB)
安全係數是規劃基準,而非受管理服務配置規則。對每個本機歷程檔複本使用測量的歷程檔產生位元組,新增非歷程檔保留,並且包含完整的停機、重新啟動、追加以及回應間隔,不需要將相同的資料計算兩次。
注意:此範例說明了計算,但它不是單一部署容量建議。根據每個部署的確認容量驗證保留和工作負載分割。
GoldenGate 處理作業計數建議
下表提供每個工作負載層的 OCI GoldenGate 資料複製部署建議的處理作業計數。這些計數假設是單一來源的多目標部署模式。若為多重來源組態,請將 Extract 數目乘以來源資料庫數目,並據此調整 OCPU 數目。
| GG 處理 | 小型 | 中 | 大型 | 超大型 |
|---|---|---|---|---|
| 擷取 (整合) | 1 | 1-2 | 1-2 | 2-4 |
| 分送路徑 | 1-2 | 2-4 | 4-8 | 8-16 |
| Replicat (傳統) | 1-2 | 2-5 | 5-15 | 15-30 |
| Replicat (平行) | 1 | 1-2 | 2-4 | 4-8 |
| Replicat (協調式) | 1-2 | 2-5 | 5-10 | 10–0 |
| 並行處理上限 | 2-4 | 8-14 | 16-34 | 36-70 |
針對多個來源,考量每個支援的擷取範圍,並據此調整運算。在 OCPU Guidance 中套用主控台和並行流程津貼,然後驗證記憶體、目標容量和尖峰需求。當一個部署無法符合已測試的需求時,跨部署分割工作負載。
擷取處理準則
- 從每個支援的來源擷取範圍一個整合式 Extract 開始。對於 CDB/PDB 來源,請使用所選部署組建和資料庫支援的擷取組態。
- 僅為有效的工作負載分割區或測量的擷取瓶頸引進其他擷取。測試探勘負荷、來源資料庫資源、交易一致性和復原。
- 單一 Extract 可以寫入多個歷程檔。這可讓單一 Extract 饋送多個目標,或將大型工作負載分割成多個 Replicat 可處理的歷程檔。
- 在使用多個歷程檔之前確認平台限制;例如,具有 GTID 集定位的 MySQL Extract 僅支援一個歷程檔。
配送服務準則
- 單一配銷服務可以維持多個並行路徑。為每個必要的歷程檔傳輸路由設定路徑,並說明扇出流量和每個下游用戶。
- 若為 WAN 發行軟體,請複查支援的路徑緩衝區和 TCP 清除設定,以補償網路延遲。只有在路由測試示範限制條件之後,才會變更設定值。
Replicat 處理作業準則
- 為您的工作負載選取正確的 Replicat。例如,請參閱 Oracle 資料庫的 Replicat 類型。
- Oracle 建議將 Parallel Non-Integrated Replicat 用於 Oracle 資料庫和 Parallel Replicat 用於支援此資料庫的所有其他 GoldenGate 平台。
- Classic Replicat 會以序列方式套用,並且適用於缺乏平行套用支援的開發、輕量工作負載災害復原案例及非 Oracle 目標。
- 協調器可管理協調式 Replicat 的多個套用繫線,讓此 Replicat 適用於需要相依性追蹤的結構化 OLTP 工作負載。
- 為每個目標綱要或邏輯工作負載分割區指派一個 Replicat 群組,以最大化平行程度並隔離失敗網域。
OCPU 考量
- 平行 Replicat 通常需要額外的 OCPU 資源作為平行程度增加。
- 整合式 Replicat 會在目標 Oracle Database 內執行平行套用,因此在容量規劃中包含目標資料庫資源。
災害復原拓樸指南
OCI GoldenGate 會操作服務基礎架構。根據所選雲端和區域中的業務復原目標和功能可用性,選取受管理的復原拓樸。資料庫、網路、複製及應用程式復原仍是完整設計的一部分。
單一部署
- 適合開始部署開發、品質保證、試行方案及工作負載,並具備符合協定目標的復原程序。
- 設定支援的處理作業自動啟動並重新啟動控制項,以及測試其行為。
- 使用服務部署備份和檢查點保護的歷程檔保留。在 Runbook 中包括來源和目標資料庫復原。
主要和對等部署
- 您可以建立本地或跨區域對等體,以提高可用性,並將計畫性維護和非計畫性停機期間的停機時間降到最低。
- 主要部署可以有一個對等部署。待命資料庫的大小一律與主要資料庫相同。
- 執行對等前置檢查和復原練習。RPO (復原點目標) 為零。RTO (復原時間目標) 取決於部署中儲存的資料量。儲存使用率越高,RTO 就越長。
- 若要進行跨區域復原,請驗證分配路徑端點、信任存放區憑證、加密密碼複製、連線路由以及處理作業啟動。請參閱管理對等部署以瞭解詳細資訊。
部署備份與維護
- 此服務會保留每日自動備份 12 天,直到您刪除為止。備份內容只能包含描述資料或描述資料和歷程檔。如需詳細資訊,請參閱管理部署備份。
- 部署備份不會取代來源和目標資料庫備份或必要的即時歷程檔保留。在一致的復原點測試回復順序。
- 規劃與部署升級關聯的停止 / 重新啟動和待處理項目。複查已知問題和部署特定維護資訊。
監督和度量基準
從第一天開始建立監控基準。持續追蹤生產部署的服務使用情況、流程效能、資料庫資源,以及從尋源到目標的完整路徑。
OCI 監控度量
- 擷取:擷取延遲與處理狀態。
- 分配與接收者路徑:延遲與狀態。
- 複本:套用延遲和處理作業狀態。
- 部署:OCPU 使用量、OCPU 使用量、記憶體及儲存使用量。
- 應用程式:活動訊號延遲。
您可以檢閱資料複製測量結果中可用測量結果的完整清單。
在 OCI Monitoring 中設定警示,以執行流程失敗、新鮮度違規、延遲進度和預測儲存耗盡。臨界值應允許操作員回應的時間。OCI Notifications 服務提供這些警示。
正在起始大小驗證條件
在部署和代表性工作負載測試之後,依據應用程式目標驗證調整大小。為每個工作負載定義數字延遲、資源和追加臨界值,而不是將它們視為通用服務限制。
適當大小的部署應該顯示:
- 在正常和持續的尖峰需求期間,協定目標內的端對端新鮮度和每個處理延遲。
- 在整個計畫的停機和復原過程中,沒有任何持續的歷程檔存量成長和足夠的保留空間。
- 透過大型交易與並行活動保持穩定的記憶體與暫時空間行為。
- 沒有未發現的資料錯誤、週期性處理作業重新啟動或資源相關異常中止。
- 在協定期限內進行存量 (Backlog) 復原,但新來源變更仍持續。
- 重新啟動、備份 / 回復及對等復原測試 (如適用)。
在測試中包含初始負載重疊、備份、維護和預測成長。記錄達成率、最差情況延遲、保留儲存空間、復原時間、一致性結果,以及需要進行新規模調整的條件。
預先佈建檢查清單
佈建初始 OCI GoldenGate 部署之前,請先完成下列檢查清單。提前收集此資訊可減少部署延遲和部署後調整大小。
- 從來源資料庫收集尖峰與平均重做日誌產生率 (每小時、每天)。
- 識別複製的表格、資料列大小、LOB、最大交易、篩選以及轉換。
- 決定來源和目標計數、部署位置,以及區域網路 / 廣域網路 / 跨雲端路由。
- 確認支援的端點組合與部署技術。
- 與應用程式擁有者確認延遲 SLA (資料新鮮度需求)。
- 選取基礎 OCPU 和自動調整功能;記錄主控台和並行處理作業允許數。
- 調整每個保留的歷程檔複製、復原存量 (Backlog)、非歷程檔保留以及檢查點保護的永久清除原則大小。
- 驗證正常、尖峰和復原需求期間的測量電線傳輸量和路由延遲。
- 評估補充日誌記錄影響,並驗證來源探勘和目標套用容量。
- 定義來源 / 目標權限、證明資料、存取原則、DNS、路由及必要的監聽器連接埠。
- 選擇復原拓樸並確認所選雲端中的對等、備份及組建可用性。
- 規劃初始載入和一致的同步化界限。透過追加保留日誌 / 歷程檔。
- 建立監控、警報、操作員所有權和代表性測試驗收標準。
免責聲明
Oracle 基於這些常見部署模式和內部測試的建議。實際資源需求可能會因工作負載特性 (包括交易複雜性、DML/DDL 混合、網路延遲、目標資料庫效能以及補充日誌記錄組態) 而異。
這些建議反映 Oracle GoldenGate 客戶環境和 Oracle 內部工程體驗的通用部署特性。他們打算為產能規劃提供實用的起點,而不是針對工作負載特定的效能驗證提供替代品。
Oracle Corporation 和其關係企業對於特定環境的這些建議之準確性、完整性或適用性,不提供任何明示或暗示的保證。客戶須負責在上線前,根據自己的生產環境工作負載驗證所有建議和調整指引大小。