H 사의 리테일 플랫폼을 구축하며 적용된 사례입니다. MSA 환경에서 서비스간 DB 동기화가 필요한 요건을 해결하기 위해 AWS MSK 서비스를 도입하게 되었습니다. CDC 에 대한 간략적인 개념설명과 AWS MSK 를 사용한 RDS PostgreSQL DB 간의 CDC 구축에 대해 알아보고 구축 후 발생한 RDS 의 DiskFull 현상에 대한 Truble Shooting 도 다뤄보겠습니다. CDC Change Data Capture의 약자로 데이터베이스의 데이터가 변경될 때, 변경 정보를 캡처하여 외부 시스템으로 전송하는 기술입니다. CDC 는 시스템 간에 데이터를 동기화하거나 분석 및 보고에 사용되는 실시간 데이터 파이프라인을 구축하는 데 사용됩니다. 이 글에서는 AWS RDS PostgreSQL ..
AWS MSK를 활용한 AWS RDS PostgreSQL CDC
H 사의 리테일 플랫폼을 구축하며 적용된 사례입니다. MSA 환경에서 서비스간 DB 동기화가 필요한 요건을 해결하기 위해 AWS MSK 서비스를 도입하게 되었습니다. CDC 에 대한 간략적인 개념설명과 AWS MSK 를 사용한 RDS PostgreSQL DB 간의 CDC 구축에 대해 알아보고 구축 후 발생한 RDS 의 DiskFull 현상에 대한 Truble Shooting 도 다뤄보겠습니다. CDC Change Data Capture의 약자로 데이터베이스의 데이터가 변경될 때, 변경 정보를 캡처하여 외부 시스템으로 전송하는 기술입니다. CDC 는 시스템 간에 데이터를 동기화하거나 분석 및 보고에 사용되는 실시간 데이터 파이프라인을 구축하는 데 사용됩니다. 이 글에서는 AWS RDS PostgreSQL ..
2023.07.05