본문 바로가기

Database3

Stackable Operator - Stackable Data Platform (SDP) Stackable Operator CloudNet@ 팀 gasida님의 DOIK(Database Operator In Kubernetes) 스터디를 진행하며 작성한 글 입니다. 1. Stackable Data Platform (SDP) Kubernetes 환경에서 오픈소스 데이터 관련 애플리케이션들을 손쉽게 배포하고 관리할 수 있게끔 도와주는 Operator 입니다. Stackable은 계층적 구조를 가지는데, Data 관련 파이프라인(airflow-scheduled-job , data-lakehouse-iceberg-trino-spark 등..) 을 Best Pratice 환경으로 쉽게 배포해 주거나, 데이터 관리 오픈소스(Hadoop, Kafka, Spark 등) 를 설치하고 관리하는데 필요한 Thi.. 2023. 11. 23.
Kafka In kubernetes - Strimzi Operator Kafka In kubernetes - Strimzi Operator CloudNet@ 팀 gasida님의 DOIK(Database Operator In Kubernetes) 스터디를 진행하며 작성한 글 입니다. Kafka Strimzi Kafka Strimzi 는 쿠버네티스 환경에서 카프카 Kafka 운영 관리에 도움을 주는 Operator 입니다. Strmizi v0.38.0 doc Strimzi가 제공하는 Kafka 구성요소 Kafka MirrorMaker Kafka Cluster간의 데이터 전송 / 수신을 도와주게 됩니다. Kafka Bridge Client Application에서 Kafka Producer 또는 Consumer가 되기 위해서 라이브러리를 설치해야하는데, 불가능한 경우가 있을 수.. 2023. 11. 18.
CloudNative한 PostgreSQL CloudNative한 PostgreSQL CloudNet@ 팀 gasida님의 DOIK(Database Operator In Kubernetes) 스터디를 진행하며 작성한 글 입니다. Overview CloudNativePG 공식문서 github 원본글 x.x , x-x 는 동일한 Subnet 대역을 의미합니다. PostgreSQL PostgreSQL(줄여서 PG)은 라이센스에 제약받지 않고 복사, 연구, 수정배포등의 제한이 없지만, 트랜잭션, 인덱싱 등 데이터베이스 기능과 클러스터 등 안정성을 위한 기능들을 제공하는 RDBMS CloudNativePG Cluster 구성 PG DB Instance는 3가지로 나뉘게 되며, 종류는 다음과 같습니다. - RW - 쓰기를 위한 primary DB인스턴스 접.. 2023. 11. 3.