JooninTech BlogKafka Rest Proxy를 알아보자회사에서 여러모로 Rest Proxy를 다룰 일이 있어 직접 사용해보면서 알아보기 위해 공부를 좀 해보았다. Kafka Rest Proxy는 Apache Kafka 클러스터에 HTTP 기반의 인터페이스를 제공하는 서비스이다. 이를 통해 쉽게…Mar 31Mar 31
Jooninbba.runmini PC에 K8S 올리기url shortner 서비스 bba.run 에서 사용하기 위한 데이터 플랫폼을 구축할 계획인데 관리를 편하게 하려면 K8S에 올리는게 좋겠다고 생각했다.Mar 3Mar 3
Jooninbba.runmini PC에 bba.run 서비스 올리기얼마전 알리 익스프레스를 통해 공부 목적의 mini PC를 하나 구매했다. 여기로 bba.run 서비스를 이관한다.Feb 181Feb 181
Jooninbba.runURL Shortener : BBA RUN 개발기이전부터 관심 있게 읽었던 ‘가상 면접 사례로 배우는 대규모 시스템 설계 기초’라는 도서에 나온 URL 단축 서비스, 일명 URL Shortener 개발을 결심하게 되었다.Feb 4Feb 4
JooninTech BlogKafka 클러스터를 K8S에서 관리해보자이번에는 로그 파이프라인 인프라를 K8S로 업그레이드하기 앞서서 왜 컨테이너 환경에서 K8S 환경으로 변경하려 하는지 소개해보려 한다.Dec 10, 2023Dec 10, 2023
JooninTech Blog당신은 Kafka를 믿습니까?- Kafka와 Zookeeper 그리고 Replication우리는 여러가지 목적과 이유로 Kafka를 활용하는데, 그 중 하나는 가용성과 신뢰성의 이유다. 신뢰성은 얼마나 믿을만 한지를 나타내는 쉬운 말이지만, 가용성이란 이보다 조금 어려운 개념으로 서버와 네트워크, 프로그램 등의 정보 시스템이 정상적으로…Sep 1, 2023Sep 1, 2023
JooninTech BlogKafka를 사용하여 초당 10000건의 로그를 처리하는 파이프라인을 구축하기분산 이벤트 브로커인 카프카와 분산 클러스터 컴퓨팅 프레임워크인 스파크를 공부하던 중 “분산 처리의 힘은 어느정도인가?”, “얼마나 많은 양의 데이터를 실시간으로 처리할 수 있을까?” 가 궁금해져서 이 프로젝트를 해보게 되었다.Jun 27, 2023Jun 27, 2023