EC2 배치 그룹 (EC2 Placement Groups) EC2 배치 그룹이란 EC2 서비스의 모든 인스턴스가 기본 하드웨어 전반에 분산되도록 하여 상호 관련 오류의 위험을 줄이기 위해 설정하는 전략입니다. Cluster (클러스터 배치그룹) 단일 가용 영역(Single AZ)에서 가장 ...

Linux 점검을 위한 명령어 실행 고객사에서 OS 점검을 할 때 서버 대수가 많기 때문에, 스크립트를 돌려서 각 호스트별로 여러 항목에 대한 이상 유무에 따라 OK와 NOK를 출력 및 저장하고 있다. 점검하는 서버도 많고 항목도 많기 때문에 생성되는 파일 내용과 개수도 많으므로 이를 수동으로 체크하기에 시간이 많이 소요된다. 이 시간을 단축...

OCI 환경 그라파나 리눅스 설치 방법 OS: Oracle Linux 8.8 Version: Grafana Enterprise 8.2.3 OCI에 Test 인스턴스 생성 grafana User 및 Password 생성 sudo useradd grafana sudo passwd grafana [password] ...

Confluent 클러스터 링크 생성하기 Cluster Linking 이란? Kafka 클러스터 간의 직접적인 연결을 통해 한 클러스터에서 다른 클러스터로 토픽을 미러링할 수 있는 기능이다. Cluster Linking의 주요 특징은 다음과 같다. 직접 연결: 클러스터를 직접 연결하여 토픽을 미러하기 때문에 메시지 복사에 ...

Confluent 커넥터 설치 Datagen Connector 및 FileStream Connector 설치 가이드 설치 방법 Connector를 설치하는 방법은 다양하다. hosts.yml 파일에 넣어 Ansible로 설치 confluent-hub를 통해 설치 docker image에 설치 수동 설치 Data...

Confluent 6.1 Install 방법 User 추가 sudo -i useradd kafka SUDO 권한 설정 echo "kafka ALL=(ALL) NOPASSWD: ALL" > /etc/sudoers.d/kafka 방화벽 중지 및 비활성화 su - kafka sudo systemctl stop fir...

Apache Kafka Components 소개 Kafka는 대규모 실시간 데이터 스트리밍 플랫폼으로, 데이터를 생성하고 처리하는 다양한 컴포넌트로 구성됩니다. 이 글에서는 카프카의 주요 구성 요소인 프로듀서, 컨슈머, 토픽, 파티션, 브로커, 주키퍼, 그리고 커넥터에 대해 알아보겠습니다. 1. 프로듀서 & 컨슈머 (Produce...

Linux System Info 1. CPU 정보 확인 시스템 전반에 대한 정보를 나타냅니다. # dmidecode -t system # dmidecode 3.3 Getting SMBIOS data from sysfs. SMBIOS 2.7 present. Handle 0x0001, DMI type 1, 27 bytes System In...

Apache Kafka 개념 아파치 카프카(Apache Kafka)는 실시간 데이터 스트리밍 플랫폼으로, 대용량의 데이터를 안정적이고 확장 가능한 방식으로 처리할 수 있도록 도와주는 오픈소스 분산 메세징 시스템이다. 카프카는 메시지 큐의 기능을 제공한다. Producer(송신자)가 데이터를 생성하여 카프카에 전송하면, 이를 Cons...

HTTP 개요 HTTP는 HyperText Transfer Protocol의 약자이다. HTTP란 하이퍼텍스트를 전송하기 위한 통신 규약으로, 쉽게 말해 클라이언트와 서버가 주고받는 데이터의 내용이나 순서를 정한 것이다. HTTP 요청 및 응답 HTTP로 데이터를 주고받기 위해 웹 브라우저(클라이언트)가 웹 서버에 요청(Request...