Autonomous Transaction Processing에서 Confluent Kafka로 데이터 복제

이 빠른 시작은 OCI GoldenGate를 사용하여 Autonomous Transaction Processing에서 Confluent Kafka로 데이터를 복제하는 방법을 보여줍니다.

시작하기 전에

이 빠른 시작을 성공적으로 완료하려면 다음이 있어야 합니다.

소스 Autonomous Transaction Processing 인스턴스입니다.
Confluent Platform 인스턴스입니다.

환경 설정: Autonomous Transaction Processing

복제를 위해 소스 데이터베이스가 아직 설정되지 않은 경우 다음 단계에 따라 이 빠른 시작에 사용할 샘플 스키마를 로드할 수 있습니다. 이 빠른 시작은 소스 데이터베이스에 대해 Autonomous Transaction Processing을 사용합니다.

소스 Autonomous Database를 설정하려면 다음과 같이 하십시오.

샘플 데이터베이스 스키마를 다운로드하고 압축을 풉니다.
In the Oracle Cloud console, select your Autonomous Transaction Processing (ATP) instance from the Autonomous Databases page to view its details and access Database Actions.
GGADMIN 사용자 잠금을 해제합니다.
1. 데이터베이스 작업, 데이터베이스 사용자 순으로 누릅니다.
2. GGADMIN을 찾은 다음 줄임표 메뉴(점 3개)를 누르고 편집을 선택합니다.
3. [사용자 편집] 패널에서 GGADMIN 비밀번호를 입력하고 비밀번호를 확인한 다음 계정이 잠김을 선택 해제합니다.
4. 변경사항 적용을 누릅니다.
소스 샘플 스키마 및 데이터를 로드합니다.
1. 데이터베이스 작업 메뉴의 개발 아래에서 SQL을 선택합니다.
2. OCIGGLL_OCIGGS_SETUP_USERS_ATP.sql에서 스크립트를 복사하여 SQL Worksheet에 붙여 넣습니다.
3. 스크립트 실행을 누릅니다. Script Output 탭에 확인 메시지가 표시됩니다.
4. SQL Worksheet를 지운 다음 OCIGGLL_OCIGGS_SRC_USER_SEED_DATA.sql.에서 SQL 스크립트를 복사하여 붙여넣습니다.
  
  참고:
  스크립트를 성공적으로 실행하려면 SQL 도구에 대해 각 명령문을 별도로 실행해야 할 수도 있습니다.
5. 테이블이 성공적으로 생성되었는지 확인하려면 SQL 창을 닫고 다시 여십시오. Navigator 탭에서 SRC_OCIGGLL 스키마를 찾은 다음 각 드롭다운에서 테이블을 선택합니다.
보완 로깅 사용:
1. SQL Worksheet를 지웁니다.
2. 다음 명령문을 입력한 후 명령문 실행을 누릅니다.
```
ALTER PLUGGABLE DATABASE ADD SUPPLEMENTAL LOG DATA;
```

환경 설정: Confluent Cloud

대상 Confluent Cloud 클러스터, 토픽 및 스키마가 없는 경우 다음을 수행할 수 있습니다.

클러스터 생성.
클러스터에 대한 API 키 생성. 다음 단계에 대한 API 키 및 암호를 기록해 두십시오.
스키마 레지스트리를 사용으로 설정한 다음 Confluent Cloud Schema Registry에 대한 API 키를 생성합니다. 다음 단계에 대한 API 키 및 암호를 기록해 두십시오.
클러스터에서 주제 생성 다음 단계에 대한 항목의 이름을 확인합니다.

작업 1: OCI GoldenGate 리소스 생성

이 빠른 시작 예에서는 소스 및 대상에 대한 배치 및 접속이 필요합니다.

소스 Autonomous Transaction Processing 인스턴스에 대한 Oracle 배치를 생성합니다.
대상 Confluent Cloud에 대한 빅데이터 배치를 생성합니다.
소스 Autonomous Transaction Processing에 대한 접속을 생성합니다.
Confluent Kafka 접속을 생성합니다.
Confluent 스키마 레지스트리 생성
(선택사항) Big Data 배치에 퍼블릭 끝점이 없는 경우 GoldenGate에 대한 접속을 생성한 다음 이 접속을 소스 Oracle 배치에 지정합니다.
소스 Oracle 배치에 Autonomous Transaction Processing 접속을 지정합니다.
대상 Big Data 배치에 Confluent Kafka 및 Confluent 스키마 레지스트리 접속 지정

작업 2: 추출 추가

Deployments 페이지에서 소스 Autonomous Transaction Processing 배치를 선택합니다.
배포 세부정보 페이지에서 콘솔 실행을 누릅니다.
소스 배치의 관리자 사용자 이름 및 비밀번호로 로그인합니다.
거래 정보를 추가합니다.
Extract 추가

작업 3: Distribution Path 추가 및 실행

GoldenGate 인증서 저장소를 사용하는 경우 대상 Big Data 배치에서 배포 경로에 대한 사용자를 생성하고, 그렇지 않은 경우 3단계로 건너뜁니다.
소스 ATP GoldenGate 배포 콘솔에서 1단계에서 생성한 사용자에 대한 경로 연결을 추가합니다.
1. 소스 ATP GoldenGate 배치 콘솔에서 왼쪽 탐색에서 경로 접속을 누릅니다.
2. 경로 연결 추가(더하기 아이콘)를 누른 후 다음을 완료합니다.
  1. 인증서 별칭에 GGSNetwork을 입력합니다.
  2. 사용자 ID에 1단계에서 만든 사용자의 이름을 입력합니다.
  3. 확인을 위해 사용자의 비밀번호를 두 번 입력합니다.
3. 제출을 누릅니다.
  
  경로 연결이 경로 연결 목록에 나타납니다.
소스 ATP 배치 콘솔에서 다음 값을 사용하여 분배 경로 추가를 수행합니다.
1. 소스 옵션 페이지에서 다음을 수행합니다.
  - 소스 추출의 경우 태스크 2에서 생성된 추출을 선택합니다.
  - Trail Name에 2자 이름(예: E1)을 입력합니다.
2. 대상 옵션 페이지에서 다음을 수행합니다.
  - 대상 호스트에 대해 대상 배치의 호스트 도메인을 입력합니다.
  - 포트 번호에서 443을 입력합니다.
  - Trail Name에 2자 이름(예: E1)을 입력합니다.
  - 별칭에 2단계에서 생성한 인증서 별칭을 입력합니다.
대상 Big Data 배치 콘솔에서 Distribution Path의 결과로 생성된 Receiver Path를 검토합니다.
1. 대상 Big Data 배치 콘솔에서 Receiver Service을 누릅니다.
2. 경로 세부 정보를 검토합니다. 이 경로는 이전 단계에서 생성된 Distribution Path의 결과로 생성되었습니다.

작업 4: Replicat 추가 및 실행

대상 Big Data 배치 콘솔에서 Administrator Service을 누르고 Add Replicat(더하기 아이콘)을 누릅니다.
Replicat를 다음 값으로 추가합니다.
1. Replicat 정보 페이지의 Replicat 유형에서 Coordinated Replicat을 선택하고 프로세스 이름을 입력한 다음 다음을 누릅니다.
2. [복제 옵션] 페이지에서 다음을 수행합니다.
  - 이름에 태스크 2의 추적 이름을 입력합니다.
  - 도메인의 경우 도메인을 선택합니다.
  - 별칭에 대해 작업 1에서 만든 Confluent Kafka 연결을 선택합니다.
  - 체크포인트 테이블의 경우 대상 배치에 대해 생성한 체크포인트 테이블을 선택합니다.
3. Replicat 매개변수 페이지에서 MAP *.*, TARGET *.*;를 다음으로 바꿉니다.
```
MAP SRC_OCIGGLL.SRC_CUSTOMER, Table SRC.CUSTOMER;
```
생성 및 실행을 누릅니다.

Overview 페이지로 돌아가서 Replicat 세부 정보를 검토할 수 있습니다.

작업 5: 복제 확인

소스 Autonomous Transaction Processing 인스턴스에 대한 몇 가지 업데이트를 수행하여 Confluent Kafka Cloud에 대한 복제를 확인합니다.

Oracle Cloud 콘솔에서 탐색 메뉴를 열고 Oracle Database를 선택한 다음 Autonomous Transaction Processing을 선택합니다.
Autonomous Transaction Processing 인스턴스 목록에서 세부정보를 볼 소스 인스턴스를 선택합니다.
데이터베이스 세부 정보 페이지에서 데이터베이스 작업을 누릅니다.

주:
자동으로 로그인되어 있어야 합니다. 그렇지 않은 경우 데이터베이스 인증서를 사용하여 로그인합니다.
데이터베이스 작업 홈 페이지에서 SQL을 선택합니다.

워크시트에 다음을 입력하고 스크립트 실행을 누릅니다.

Insert into SRC_OCIGGLL.SRC_CITY (CITY_ID,CITY,REGION_ID,POPULATION) values (1000,'Houston',20,743113);
Insert into SRC_OCIGGLL.SRC_CITY (CITY_ID,CITY,REGION_ID,POPULATION) values (1001,'Dallas',20,822416);
Insert into SRC_OCIGGLL.SRC_CITY (CITY_ID,CITY,REGION_ID,POPULATION) values (1002,'San Francisco',21,157574);
Insert into SRC_OCIGGLL.SRC_CITY (CITY_ID,CITY,REGION_ID,POPULATION) values (1003,'Los Angeles',21,743878);
Insert into SRC_OCIGGLL.SRC_CITY (CITY_ID,CITY,REGION_ID,POPULATION) values (1004,'San Diego',21,840689);
Insert into SRC_OCIGGLL.SRC_CITY (CITY_ID,CITY,REGION_ID,POPULATION) values (1005,'Chicago',23,616472);
Insert into SRC_OCIGGLL.SRC_CITY (CITY_ID,CITY,REGION_ID,POPULATION) values (1006,'Memphis',23,580075);
Insert into SRC_OCIGGLL.SRC_CITY (CITY_ID,CITY,REGION_ID,POPULATION) values (1007,'New York City',22,124434);
Insert into SRC_OCIGGLL.SRC_CITY (CITY_ID,CITY,REGION_ID,POPULATION) values (1008,'Boston',22,275581);
Insert into SRC_OCIGGLL.SRC_CITY (CITY_ID,CITY,REGION_ID,POPULATION) values (1009,'Washington D.C.',22,688002);

소스 ATP 배포 콘솔에서 추출 이름을 선택한 다음 통계를 누릅니다. SRC_OCIGGLL.SRC_CITY에 10개의 삽입이 있는지 확인합니다.
대상 Big Data OCI GoldenGate 배치 콘솔에서 Replicat 이름을 선택한 다음 통계를 누릅니다. SRC_OCIGGLL.SRC_CUSTOMER에 7개의 삽입이 있는지 확인합니다.

작업 6: (선택 사항) Confluent CLI에서 복제 확인

시스템에 Confluent CLI를 설치합니다.

실행:

export PATH=$(pwd)/bin:$PATH
confluent login

환경 나열 및 환경 선택

confluent environment list
confluent environment use <your_environment_ID>

클러스터 나열 및 클러스터 선택

confluent kafka cluster list
confluent kafka cluster use <your_cluster_id>

로컬에 API 키 및 암호 저장

confluent api-key store <cluster_api_key> <cluster_api_secret>
confluent api-key use <cluster_api_key> --resource <cluster_id>

목록 항목
```
confluent kafka topic list
```

메시지 보기

confluent kafka topic consume --value-format avro --from-beginning <topic_name>

제목 및 저작권 정보

Oracle and/or its affiliates.

설명서 접근성

For information about Oracle's commitment to accessibility, visit the Oracle Accessibility Program website at http://www.oracle.com/pls/topic/lookup?ctx=acc&id=docacc.

오라클 고객지원센터 액세스

지원 서비스를 구매한 오라클 고객은 My Oracle Support를 통해 온라인 지원에 접근할 수 있습니다. For information, visit http://www.oracle.com/pls/topic/lookup?ctx=acc&id=info or visit http://www.oracle.com/pls/topic/lookup?ctx=acc&id=trs if you are hearing impaired.