Centos8 검색 결과
17 개의 검색 결과가 있습니다.
Linux/ELK

CentOS8 ELK kafka 연동

이번에는 ELK 에 kafka 를 연동해보겠습니다. kafka 에 적재된 메세지를 kibana 에서 확인하는걸 목표로 합니다. 설치를 안하신분은 아래를 따라 설치해주시면 됩니다. https://program-error-review.tistory.com/30 CentOS8 ELK 설치 (Elastic search, Log Stash, Kibana) 이번엔 CentOS8 에 ELK 를 설치해보겠습니다. ELK 는 Kafka 메세지와 연동시켜서 활용해볼 예정입니다. www.elastic.co/guide/en/elastic-stack/7.8/installing-elastic-stack.html 설치는 공식페이지를 참고했습.. program-error-review.tistory.com 우선 저번에 설치한 logs..

2020. 7. 8. 16:18
Linux/ELK

CentOS8 ELK 설치 (Elastic search, Log Stash, Kibana)

이번엔 CentOS8 에 ELK 를 설치해보겠습니다. ELK 는 Kafka 메세지와 연동시켜서 활용해볼 예정입니다. www.elastic.co/guide/en/elastic-stack/7.8/installing-elastic-stack.html 설치는 공식페이지를 참고했습니다. 1. Elastic Search 설치 $ wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.8.0-x86_64.rpm $ sudo dnf install elasticsearch-7.8.0-x86_64.rpm repo 가 다운로드 되지 않는 현상이 있는데 몇번 시도를 해보니 자동으로 해결되었다. 다른 포스팅에서 해당 내용을 정리해보겠다. 2. Log ..

2020. 7. 7. 10:37
Linux

CentOS8 간단한 batch file 예시

이전 포스팅에서 Kafka Manager (CMAK) 예제를 진행하면서 마지막에 남긴 말이 있다. (주의사항) RUNNINIG_PID 파일이 생성되어 있거나 프로세스가 실행중이면 서비스가 실행되지 않음. 이 문제를 해결하기 위해서는 다음과 같은 과정이 필요하다. $ sudo rm -f /usr/local/kafka-manager/RUNNING_PID $ sudo systemctl stop kafka-manager $ sudo systemctl start kafka-manager 아직 원천적인 해결방법을 못찾았기에 귀찮음을 덜고자 batch file 을 만들어 보려고 합니다. 적절한 폴더에 파일을 만들어줍시다. $ vim kafka-manager-restart.bat 배치파일. shell 에서 실행하는 파..

2020. 5. 26. 09:37
Linux/kafka

Apache Kafka Web UI Kafka-Manager 설치하기 (Yahoo CMAK)

Apache Kafka 에는 기본 내장 UI 가 없지만 많은 사람들이 이용하고 있는 UI 가 있습니다. Yahoo 에서 개발한 Kafka-Manager 인데요. 지금은 이름을 CMAK 으로 변경하여 프로젝트를 진행하고 있습니다. 모듈을 다운받아봅시다. $ wget https://github.com/yahoo/kafka-manager/archive/master.zip 다운을 받으면 현재경로에 master.zip 이라는 파일이 생깁니다. 압축을 풀어줍시다. $ unzip master.zip zip 파일을 풀어주면 CMAK-master 라는 폴더가 생깁니다. 빌드를 위해 sbt 를 설치해줍시다. $ curl https://bintray.com/sbt/rpm/rpm | sudo tee /etc/yum.repos..

2020. 4. 28. 16:10
Error Review

Kafka-Manager (CMAK) compile error ./sbt clean dist

Apacke Kafka 를 사용하다보면 UI 를 찾다가 Kafka-Manager 를 찾게됩니다. 해당 모듈을 빌드할 때 발생하는 오류에 대한 해결방법을 정리합니다. 환경 CentOS 8 Java 1.8.0 / openjdk 11 메뉴얼을 보면 kafka-manager 다운로드 후 압축을 풀고 ./sbt clean dist 명령어로 빌드를 하라고 합니다. 저는 해당 과정에서 에러가 발생했습니다. KafkaStateActor.scala:115:29: type mismatch; [error] found : java.util.Map[_$1,_$2] where type _$2, type _$1 [error] required: java.util.Map[?

2020. 4. 28. 15:06
Linux/kafka

CentOS 8 Apache Kafka 설치 (dnf install)

저번 포스팅에서 Kafka 를 Docker 에 설치해봣는데 로컬에 바로 설치하자는 의견이 있어 예제를 만들어봅니다. Apache Kafka 는 자바와 스칼라로 작성되었습니다. 먼저 자바를 설치해봅시다. $ sudo dnf install java-11-openjdk wget vim 설치가 완료되었으면 Apache Kafka 를 다운받아 봅시다. kafka-manager 도 연동하기위해 최신버전은 피해주겠습니다. $ wget http://www-us.apache.org/dist/kafka/2.4.0/kafka_2.12-2.4.0.tgz 저는 우분투에서 위 버전을 테스트 해봤기 때문에 해당 버전으로 선정했습니다. 이제 wget 을 실행했던 경로에 kafka.tgz 파일이 생성되었습니다. 해당 파일을 압축해제해..

2020. 4. 27. 16:46