이번 주제인 메시지 큐와 이벤트 브로커는 일을 나눠서, 기다리지 않고 처리하는 도구다.메시지 큐는 프로젝트에서 "써봤다"고 말하기 쉬운 기술이지만, 막상 "왜 도입했나요?"라는 질문을 받으면 대답이 얕아지기 쉽다고 느꼈다. 그래서 이번에는 어떻게 쓰는지보다 왜 필요한지를 중심으로 정리해 보려 한다.1. 동기와 비동기: 주문 버튼을 누르고 몇 초씩 기다려야 할까?비동기 처리는 요청을 보낸 뒤 응답을 기다리지 않고 다음 작업을 진행하는 방식이다.동기 방식은 응답이 올 때까지 대기한 뒤 다음 작업으로 넘어간다. 사용자가 상품을 주문하면 서버는 이런 일들을 해야 한다.주문 생성 → 결제 처리 → 재고 차감 → 배송 요청 생성 → 알림/이메일 발송 → 주문 정보 저장 → "주문 성공!" 이 작업을 전부 순차적으로..
비관적 락, 낙관적 락, 분산 락을 다 써보고 나서야 정리했다지난 글 마지막에 커넥션 풀 데드락 얘기를 했다. 한 스레드가 커넥션 두 개를 잡으려다 서로 물려서 멈추는 상황이었다. 그걸 정리하다 보니 다음 질문이 자연스럽게 따라왔다. 애초에 락은 왜 걸고, 어떤 락을 골라야 하는 걸까.마침 내가 한 프로젝트들에 서로 다른 락이 들어가 있었다. 짠팟에서는 중복 챌린지를 막으려고 DB 비관적 락을 걸었고, Keepit에서는 AI 요약이 중복 실행되는 걸 막으려고 Redis 분산 락을 썼다. 당시엔 "이게 맞는 것 같아서" 골랐는데, 왜 그게 맞았는지 설명해보라고 하면 말이 막혔다. 그래서 이번에 제대로 정리했다.락은 왜 필요한가동시성 문제의 본질은 대부분 갱신 손실(Lost Update) 이다.스레드 A: ..
10장. 모르면 답답해지는 네트워크 기초네트워크 기초를 모르면서버 장애의 원인이 애플리케이션 코드가 아니라 네트워크 설정에 있을 수 있다.내부 통신에 사용하는 IP와 외부에서 접근할 때 사용하는 IP를 혼동하면 접속 허용 대상을 잘못 지정할 수 있다.서버 개발자가 네트워크를 깊게 알 필요는 없지만, 장애 원인을 찾고 설정 문제를 해결하려면 기본 개념은 알아야 한다.노드, 네트워크, 라우터데이터를 송수신하는 모든 장치를 노드(Node)라고 한다.휴대폰, 노트북, 서버, 네트워크 장비 등이 해당한다.노드가 서로 데이터를 주고받기 위해 연결된 시스템을 네트워크(Network)라고 한다.노드가 네트워크를 통해 전송하는 데이터의 단위를 패킷(Packet)이라고 한다.헤더에는 송수신 정보, 페이로드에는 실제 데이터..
시스템 디자인의 2번째 핵심 목표 - 성능 신뢰성 이야기를 하면서 기본적인 동작이 잘 되는 시스템을 어떻게 만드는지 그리고 문제 상황에서도 어떻게 오류 없이 작동하도록 하는지에 대해서 알아보았다.시스템이 정확하게 동작을 하더라도 응답 속도가 너무 느리게 되면 사용자 입장에서는 불편함을 느끼고 서비스를 이탈한다.그래서 성능도 중요하게 지켜야 할 목표 중에 하나이다.메신저 서비스에서 메시지를 전송했는데 한 5초 뒤에 상대방에게 도착을 했다면 실시간 대화 가능해야하는 메신저 서비스 특성상 이런 전송 지연은 치명적이다.또 주식매매 서비스에서 사용자가 매도 요청을 한 시점에 바로 매도가 되지 않으면 사용자 입장에서는 금전적인 손실이 일어날 수도 있어서 기능이 빠르게 동작하는 것이 중요하다. 성능의 정의 성능을 ..
소개이 장에서는 분산 메시지 큐를 설계한다.메시지 큐의 이점:결합도 완화(Decoupling): 컴포넌트 간의 강한 결합을 제거해 각각 독립적으로 업데이트할 수 있다.향상된 확장성: 생산자 및 소비자는 트래픽에 따라 독립적으로 확장될 수 있다.가용성 향상: 시스템의 한 부분이 중단되어도 다른 부분은 계속 큐와 상호작용한다.더 나은 성능: 생산자는 소비자의 확인을 기다리지 않고 메시지를 생산할 수 있다.대표적인 메시지 큐 구현으로 Kafka, RabbitMQ, RocketMQ, Apache Pulsar, ActiveMQ, ZeroMQ가 있다.엄밀히 말하면 Kafka와 Pulsar는 메시지 큐가 아니라 이벤트 스트리밍 플랫폼이다. 하지만 두 유형의 기능이 서로 수렴하면서 메시지 큐와 이벤트 스트리밍 플랫폼의..