2024/07/19 3

[KOSTA] Kafka를 이용한 서비스와 데이터 통합 - 1편

Topcis, Partitions, Offsets파티션토픽은 파티션을 나눌 수 있음토픽당 데이터를 분산 처리하는 단위병렬 처리와 많은 양의 데이터 처리를 위해서 파티션을 늘릴 수 있음(늘리기만 하고 줄이는 것은 안됨)파티션의 인덱스는 0부터 1, 2, ... 을 가짐파티션 별로 증가되는 아이디, Offset 값을 가지게 됨.Offset은 파티션에서만 의미가 있음 토픽과 파티션⭐️ 파티션 안에서는 데이터의 순서가 보장-> 다른 파티션의 경우 데이터의 순서성 보장이 안됨파티션에 데이터가 한 번 쓰여지면 변경이 안됨(write once)key를 주지 않으면 어느 ㅍ티션에 데이터가 들어가는지 모름 Broker Zookeeper분산 애플리케이션 코디네이터주키퍼는 브로커를 관리한다.파티션의 리더 선출을 도와준다...