본문 바로가기

Lab/Kafka lab

2. apach kafka 설치 방법 정리

개요: aws kafka를 설치 경험 정리

카프카 설치 전반

https://blog.voidmainvoid.net/325

 

aws 에서 jdk 설치 필요

https://blog.voidmainvoid.net/338

 

aws micro-2 사용 시 kafka 최소 메모리 설정

Kafka 패키지의 기본 힙 메모리 설정이 Kafka = 1G, Zookeeper = 512M으로 설정되어 있어서 프리티어의 메모리 1G에서는 Kafka와 Zookeeper를 동시에 실행하면 "Cannot allocate memory"와 같은 문제가 발생합니다.

echo $KAFKA_HEAP_OPTS
export KAFKA_HEAP_OPTS="-Xms400m -Xmx400m"
echo $KAFKA_HEAP_OPTS

이렇게 설정한 환경변수는 터미널을 종료하고 나면 초기화가 된다고 합니다.
아래와 같이 .bashrc 파일을 수정해주면 터미널을 재실행했을 때도, 설정이 유지된다고 합니다.

https://velog.io/@jwpark06/AWS-EC2%EC%97%90-Kafka-%EC%84%A4%EC%B9%98%ED%95%98%EA%B8%B0

 

반응형
사업자 정보 표시
라울앤알바 | 장수호 | 서울특별시 관악구 봉천로 13나길 58-10, 404호(봉천동) | 사업자 등록번호 : 363-72-00290 | TEL : 010-5790-0933 | Mail : shjang@raulnalba.com | 통신판매신고번호 : 2020-서울관악-0892호 | 사이버몰의 이용약관 바로가기

'Lab > Kafka lab' 카테고리의 다른 글

1. 카프카 뜯어 보기  (0) 2023.08.21