Skip to main content

실시간 대용량 스트리밍 처리를 위한 Advanced Managed Kafka 서비스 출시

· 6 min read
Kali (명시온)
Service Manager
Advanced Managed Kafka

카카오클라우드의 새로운 서비스, Advanced Managed Kafka가 출시되었습니다.

Advanced Managed Kafka는 Kafka의 운영 부담을 최소화하면서도 실시간 데이터 스트리밍의 장점을 누릴 수 있도록 설계된 완전 관리형 서비스입니다.

데이터가 실시간으로 수집, 분석되는 오늘날의 환경에서 많은 기업들이 데이터 스트리밍 도구로 Apache Kafka를 채택하고 있습니다. Kafka는 그 성능과 유연성이 뛰어나다는 장점이 있지만 고도의 설정과 지속적인 모니터링이 필요한 복잡한 시스템으로, Kafka를 직접 운영하고 관리하는 데에는 상당한 기술적 부담과 시간이 소요됩니다. 카카오클라우드는 Kafka 사용자의 운영 부담을 최소화하면서도 실시간 데이터 스트리밍의 장점을 누릴 수 있도록 설계한 완전 관리형 서비스 Advanced Managed Kafka를 개발하게 되었습니다.

그럼 Advanced Managed Kafka의 주요 기능과 특징에 대해 좀 더 자세히 살펴보겠습니다.

Advanced Managed Kafka 서비스는?

Advanced Managed Kafka는 Kafka 클러스터의 생성부터 관리까지 손쉽게 운영할 수 있는 클라우드 기반 서비스입니다. 실시간 데이터 스트리밍을 필요로 하는 애플리케이션에 적합하며, 사용자는 복잡한 Kafka 설정 없이도 안정적인 메시지 큐와 스트리밍 환경을 구축할 수 있습니다.

워크플로우 모니터링 자동화를 위한 Monitoring Flow 서비스 출시

· 12 min read
Irene (윤영지)
Service Manager
Monitoring Flow

카카오클라우드의 새로운 서비스, Monitoring Flow가 출시되었습니다.

Monitoring Flow는 이름에서도 알 수 있듯이, 애플리케이션의 상태를 실시간으로 모니터링하고, 복잡한 업무 흐름을 자동화하여 시스템 내 비효율적인 문제를 해결하는 데 중점을 둔 서비스입니다.

기존 클라우드 환경에서 모니터링을 경험해본 사용자라면, 모니터링 시스템 구축부터 프로세스 자동화, 시스템 통합에 이르기까지 상당한 시간과 리소스가 필요하다는 점에 공감하실 텐데요. 많은 기업들이 이러한 문제를 해결하고자 노력하고 있지만, 여전히 수작업과 비효율적인 관리로 인해 어려움을 겪고 있는 것이 현실입니다. 카카오클라우드는 시스템 관리의 새로운 모니터링 표준을 제시하며, 클라우드 환경에서의 복잡한 문제를 손쉽게 해결할 수 있는 솔루션으로 Monitoring Flow를 개발하게 되었습니다.

그럼 Monitoring Flow의 동작 방식과 특징에 대해 좀 더 자세히 살펴보겠습니다.

Monitoring Flow 서비스는?

Monitoring Flow는 API를 통해 애플리케이션의 상태를 실시간으로 모니터링하고, 사용자가 정의하는 워크플로우를 자동화할 수 있도록 돕는 서비스입니다. 사용자는 모니터링 시나리오를 직접 생성하고, 원하는 시간에 자동으로 실행되도록 스케줄링할 수 있습니다. 특히 Monitoring Flow는 코드 작성 없이 카카오클라우드 콘솔에서 손쉽게 워크플로우를 직관적으로 설계하고 관리할 수 있다는 강점이 있습니다. IT 전문가뿐만 아니라 비전문가들도 모니터링 프로세스를 쉽게 구축할 수 있게 된 것입니다.

카카오클라우드의 새로운 인메모리 데이터 저장 서비스, MemStore

· 5 min read
Kate (김소희)
Service Manager
Memstore

카카오클라우드는 오는 8월부터 기존의 Redis® 서비스를 대체할 새로운 인메모리 데이터 저장 서비스인 MemStore를 출시합니다. 이번 서비스명 변경은 최근 Redis®의 라이센스 변경에 신속하게 대응하고, 사용자에게 보다 향상된 기능과 안정성을 제공하기 위한 결정입니다.

왜 MemStore인가?

올해 3월, Redis Labs는 기존의 BSD 3-Clause 라이센스를 Redis Source Available License v2 (RSALv2)와 Server Side Public License v1 (SSPLv1)이라는 듀얼 라이센스 모델로 변경한다고 발표했습니다. 이로 인해 Redis®를 상업적으로 활용하려면 별도의 라이센스가 필요하게 되었고, 카카오클라우드를 비롯한 여러 클라우드 서비스 제공업체에 영향을 미쳤습니다.
카카오클라우드는 이러한 변화에 대응하여 지속 가능한 서비스 제공을 위해 관리형 캐시 데이터베이스 서비스인 MemStore를 새롭게 선보이게 되었습니다.

카카오클라우드에서 GitOps로 DevOps 효율성 극대화하기

· 13 min read
GitOps

안녕하세요! 이번 글에서는 카카오클라우드에서 GitOps를 통해 개발 및 운영 환경을 개선하는 방법을 소개하려 합니다.

GitOps는 DevOps 원칙에 기반하여 Git 리포지토리를 단일 소스로 사용하여 모든 변경 사항을 추적하고, 이를 통해 선언적으로 인프라를 관리함으로써 인프라와 애플리케이션의 일관성을 유지하는 과정을 의미합니다. 인프라와 애플리케이션의 배포 및 관리를 자동화하고 효율성을 극대화하는 방식으로, GitOps는 클라우드 네이티브 환경이 확산됨에 따라 빠르게 변화하는 시장 요구 사항에 대응하는 핵심 방법 중 하나로 자리 잡고 있습니다.

실제 개발 환경에서의 GitOps는, Git 리포지토리를 단일 소스로 사용하여 인프라와 애플리케이션 배포를 관리하는 방법을 의미합니다. 인프라를 선언적으로 정의하고, Git을 통해 모든 변경 사항을 추적하며, 자동으로 배포합니다. 이러한 일련의 작업을 통해 Git에 저장된 코드가 실제 인프라 및 애플리케이션 상태와 동기화되도록 합니다.

카카오클라우드 영문 콘솔 지원 소식 (English console is now available!)

· 3 min read
Mia (정혜원)
Technical Contents Manager
KakaoCloud Releases English Console

안녕하세요? 카카오클라우드 사용자 여러분!

오늘 카카오클라우드 콘솔에 언어 설정 기능이 추가되면서, 영문 콘솔 서비스가 시작되었습니다! 이에 따라 기술문서에 영문 가이드가 함께 제공됩니다.

사용자는 콘솔에 새로 추가된 언어 설정 탭을 통해, 한국어 및 영어, 브라우저 기본값 옵션 중 선택할 수 있습니다. 콘솔에서 언어를 선택하는 자세한 방법은 콘솔 언어 설정 가이드를 참고해 주세요. 기술문서의 경우, 상단 메뉴의 언어 설정 탭을 통해 한국어, 영어 중 원하는 언어를 설정할 수 있습니다.

이번 개선 사항은 콘솔의 주요 화면과 서비스에 적용되었습니다. 대시 보드, 설정, BCS (VM, Bare Metal Server, GPU) 서비스, VPC, Transit Gateway, IAM에 우선 적용되었으며, 향후 모든 부분에서 사용자들의 편의를 고려한 다국어 지원을 계획하고 있습니다.

Kubeflow로 구현하는 MLOps 워크플로우

· 13 min read
Update Kubeflow


안녕하세요. 이 포스트에서는 머신러닝 운영의 핵심 플랫폼인 Kubeflow를 소개해드리려고 합니다.

Kubeflow는 머신러닝의 복잡성을 해소하고, 데이터 과학자 및 개발자가 보다 쉽게, 더 빠르게 머신러닝 모델을 개발하고 배포할 수 있도록 설계된 오픈 소스 프로젝트입니다. Kubeflow 공식 사이트에서 Kubeflow를 소개하는 첫 문장을 보면, "쿠버네티스(Kubernetes) 위에서 머신러닝을 위한 다양한 오픈 소스들을 종합적으로 관리하고 운영하는데 도움을 주는 프로젝트"라는 부분을 확인할 수 있습니다.

과거 Google이 내부적으로 사용하던 TensorFlow Extended(TFX)에서 출발한 Kubeflow는 현재 쿠버네티스 기반의 다양한 환경에서 머신러닝 워크플로우를 실행할 수 있는 가장 널리 알려진 엔드-투-엔드 솔루션으로 확장되었습니다.

버스터블 기능을 탑재한 t1i 인스턴스

· 11 min read
Sandy (차신영)
Technical Contents Manager
New Release t1i


안녕하세요, BCS(Beyond Compute Service) 인스턴스 패밀리의 새 소식을 전해드립니다.
카카오클라우드는 작년 9월 t1i 버스터블(Burstable) 인스턴스를 출시했는데요. 이 포스팅에서는 t1i 인스턴스에 2024년 1월 25일부터 적용된 크레딧 기능과 버스터블 성능에 대해 살펴보겠습니다.

t1i 인스턴스 이해하기

버스터블 기능을 자세히 살펴보기 전에, 먼저 카카오클라우드 Beyond Cloud Compute(BCS)의 t1i 인스턴스에 대한 이해가 필요합니다.
카카오클라우드 범용 인스턴스의 한 종류인 t1i 인스턴스는 지속적으로 높은 CPU 성능을 요구하지는 않지만, 특정 상황에서 높은 성능을 발휘해야 하는 워크로드에 적합하도록 설계되었습니다. 이 인스턴스는 크레딧으로 제어되는 버스트 가능한 CPU 성능을 제공하여 높은 성능과 비용 사이에서 적절한 균형을 제공한다는 특징이 있습니다.

BCS 신규 인스턴스 p1i, m3az 출시

· 4 min read
Mia (정혜원)
Technical Contents Manager
안내

아래 내용은 2023년 12월 기준으로 작성된 p1im3az 인스턴스의 출시 소식입니다. 카카오클라우드 Beyond Compute Service의 최신 정보는 인스턴스 유형별 사양 문서를 참조하시기 바랍니다.

안녕하세요, BCS(Beyond Compute Service) 인스턴스 패밀리의 새소식을 전해드립니다.

카카오클라우드에서는 사용자 여러분의 다양한 워크로드 사양에 더욱 부합하는 BCS 인스턴스 유형을 계속해서 소개하고 있습니다. 이번 포스트에서는 최근 출시된 가속 컴퓨팅을 지원하는 p1i와 범용 인스턴스 m3az패밀리를 소개합니다.


1. 고성능 컴퓨팅을 위한 p1i 인스턴스

p1i는 머신 러닝 및 HPC 등 고성능 컴퓨팅에 최적화된 인스턴스 패밀리입니다. Gold 5120 스카이레이크 인텔 제온 스케일러블 프로세서를 탑재했으며, 최대 56개의 vCPU 및 512 GiB 메모리를 지원합니다. p1i 인스턴스는 현재 베어메탈서버 유형으로 제공되고 있으며, 최대 4개의 NVIDIA V100 Tensor Core GPU가 제공됩니다.

Hadoop Eco Dataflow 클러스터 제공

· 6 min read
Sandy (차신영)
Technical Contents Manager
안내

아래 내용은 2023년 12월 기준으로 작성된 Hadoop Eco 서비스의 설명글입니다. 카카오클라우드 Hadoop Eco 서비스의 최신 정보는 Hadoop Eco 문서를 참조하시기 바랍니다.

세계적인 정보 기술(IT) 연구 및 컨설팅 기업인 Gartner는 매년 Data & Analysis(D&A) 트렌드를 연구하여 발표하고 있습니다.
올해 Gartner가 발표한 보고서(Gartner Identifies the Top 10 Data and Analytics Trends for 2023)를 보면, 데이터/분석팀은 데이터 리소스를 관리하고 그 안에서 인사이트를 창출하는 '그 이상'을 수행해야 한다고 언급하고 있습니다. 그저 방대한 데이터를 수집하는 것을 넘어서, '올바른 데이터를 적절한 툴을 이용하여 적절한 시점에 수집하고, 여기서 사업적인 인사이트를 도출'하는 것을 요구하고 있습니다. 이를 위해, 기업의 데이터/분석팀은 가치 최적화(Value optimization), 데이터 공유(Data Sharing), 데이터 관찰(Observability), 데이터 및 분석 지속성(Data & analytics sustainability), 데이터 패브릭(Data fablic) 등의 트렌드를 따라야 한다고 제시합니다.

Network Load Balancer TLS 리스너 및 Access Log 활성화 기능 추가

· 4 min read
Romy (이새롬)
Technical Contents Manager
안내

아래 내용은 2023년 11월 기준으로 작성된 Load Balancing 서비스의 신규 기능 배포 소식입니다. 카카오클라우드 Load Balancing 서비스의 최신 정보는 Load Balancing 문서를 참조하시기 바랍니다.

안녕하세요, 카카오클라우드 Load Balancing 서비스에 대한 두 가지 주요 릴리즈 내용을 소개해 드립니다.

1. Network Load Balancer(NLB)에서 TLS 리스너 추가

카카오클라우드의 로드 밸런서 유형 중 NLB 리스너(Listener) 프로토콜TLS가 추가되었습니다.

TLS 프로토콜 선택 TLS 프로토콜 선택