Kafka Topic ReplicationFactor, PartitionCount 적정 개수 설정설정 Kafka 에서 Topic 을 생성할 때, 두 가지 주요한 설정을 할 수 있습니다. 바로 ReplicationFactor 와 PartitionCount…devfoxstarAugust 14, 2023 1 min
Kafka Producer max.block.ms (Broker 연결 대기 시간)정의 max.block.ms 는 Producer 에서 Broker 로 Message 를 보낼 때 최대 연결 대기 시간입니다. 해당 시간이 지나면 Message…devfoxstarJune 29, 2023 1 min
Kafka retention.ms (메세지 보관 주기 설정)보관 주기 Kafka 에서 Message 보관 주기를 설정할 수 있습니다. 기본은…devfoxstarMay 13, 2023 1 min
AWS MSK SASL/SCRAM 인증 및 액세스SASL/SCRAM AWS MSK 에 접속하는 방법은 몇가지가 있습니다. 그중에서 가장 많이 사용하는 SASL/SCRAM 인증을 알아보겠습니다. 참고로 SASL/SCRAM…devfoxstarApril 02, 2023 1 min
Kafka Topic 생성 오류 (Replication factor, brokers)오류 Kafka 서버를 구축하고 Topic 을 생성할 때 오류가 발생할 수 있습니다. 아래는 Topic…devfoxstarMarch 30, 2023 1 min
AWS MSK IAM 인증 오류 (SaslAuthenticationException, TopicAuthorizationException)오류 클라이언트에서 AWS MSK 에 IAM 권한으로 접속을 할때 아래 오류가 발생할 수 있습니다. 해당 오류는 대부분 IAM 권한 설정 문제입니다. IAM…devfoxstarMarch 29, 2023 1 min