// Links to the libraries needed

[10월 구름 커밋] 카프카로 데이터 인프라 업그레이드하기

image

안녕하세요! 이번에 열린 10월 구름 커밋에 다녀와서 간단한 후기를 남기게 되었습니다!

이번 커밋의 주제는 “카프카 데이터 인프라 업그레이드하기”였습니다.

SKT 엔지니어이자 국내 유일의 컨플루언트 공인 카프카 관리자, 강사 자격을 보유하신 고승범 엔지니어님꼐서 커밋을 진행해주셨는데요.

굉장히 재밌는 커밋이었습니다!!

사실 어려운 내용이 나올 것 같아 미리 카프카에 대해서 사전 공부를 조금 하고 갔었는데요.

카프카를 기초적인 내용부터 차근 차근 알려주셔서 더 좋았던 커밋이었습니다.

image

빅데이터에 대한 기초 내용부터 카프카의 출시 이유, 사용해야 하는 이유, 경쟁 기술, 예제를 차례대로 정리해서 설명해주셔서 이해하기가 쉬웠습니다!

그리고 2부 같은 느낌으로 카프카의 구성 요소, 카프카 에코 시스템, 스키마 레지스트리, KSQL&Streams 등에 대해 설명해주셨는데 이해가 어려운 부분도 있었지만 추후 카프카를 사용할 때 도움이 많이 될 것 같은 내용들이었습니다!

마지막으로 QnA에서는 카프카를 분산 처리라고 부르는 이유, 데드 레터 처리 방식, 늘어난 파티션을 줄일 수 없는 이유 등의 질문에 대해서 답변을 해주셨습니다!

커밋에서 필기한 내용들을 정리해놨지만 내용을 업로드하기를 원하지 않으실 수도 있어서 그에 대한 내용을 업로드하지 않도록 하겠습니다!

현재 백엔드 개발자나 인프라 개발자들은 대용량 분산 처리 시스템에 대해서 관심을 가질 수 밖에 없는 환경이라고 생각합니다!

그에 대해 감을 잡을 수 있었던 계기가 되었던 것 같습니다!


© 2024. All rights reserved.

김민제의 블로그