크리두 Story

도커 사용해서 모니터링 페이지 만들기 dockprom 이용 git clone https://github.com/stefanprodan/dockprom.git https://github.com/stefanprodan/dockprom stefanprodan/dockprom Docker hosts and containers monitoring with Prometheus, Grafana, cAdvisor, NodeExporter and AlertManager - stefanprodan/dockprom github.com Prerequisites: Docker Engine >= 1.13 Docker Compose >= 1.11 Containers 구성 Prometheus (metrics database) htt..

Ops/Monitoring 2020. 2. 18. 11:53

Troubleshooting ImportError: version conflict: '/usr/lib64/python2.7/site-packages/psutil/_psutil_linux.so' C extension module was built for another version of psutil (different than 2.2.1) 위와 같은에러 발생으로 찾은 방법 psutil 모듈을 사용하려는데 계속 설치해도 version conflict 나고 설치하면 모듈이 없다고도 하고 하다가 찾은 방법 CentOS에서 작업하다 보니 우분투도 비슷하게 하면 될거 같다. pip install --ignore-installed psutil 혹시 설치하다가 gcc 가 없는 경우 설치가 안되기도 한다. yum ins..

Ops 2020. 2. 5. 13:47

공식 사이트 https://www.fluentd.org/ Fluentd | Open Source Data Collector "Logs are streams, not files. I love that Fluentd puts this concept front-and-center, with a developer-friendly approach for distributed systems logging." Adam Wiggins, Heroku co-founder www.fluentd.org Supported Platforms Treasure Data, Inc. maintains stable packages for Fluentd and canonical plugins as Treasure Agent (the pac..

Ops/Monitoring 2020. 1. 10. 15:05

Configuration 컨피그 설정 $ sudo vi /etc/td-agent/td-agent.conf 도커 ::: term docker run -ti --rm -v /path/to/dir:/fluentd/etc fluentd -c /fluentd/etc/ -v [Host가 Linux or MacOS인 경우] 1) Host의 localtime을 설정한다 (올바르게 설정되어 있다면 바로 2번으로 넘어가자) ln -sf /usr/share/zoneinfo/Asia/Seoul /etc/localtime 2) Host의 localtime 파일을 (ro)읽기전용으로 바인딩하고 Docker Container를 실행한다. docker run -v /etc/localtime:/etc/localtime:ro 기타옵션들..

Ops/Monitoring 2020. 1. 10. 15:03

모니터링 오픈 소스 중 리얼타임 로그를 얻기 위한 Collector를 찾는 중 Fluentbit를 찾게되었다. 시스템 정보들이나 로그들을 real-time으로 얼마나 가볍게 빠르고 정확하게 모아서 쌓는가가 초점인거 같다. 최종 목표는 도커화하여 쿠버네티스로 배포하는 버전까지 세팅하는 것이다. 아래는 공식 사이트이며 전반적으로 읽어보는 것이 좋다. 어떤 프로그램이든 자료가 없는 경우 읽어서 알아보는 능력이 필요하기 때문이다. fluentbit 공식 사이트 https://fluentbit.io/ Fluent Bit Configuration The service use a simple and human-readable configuration file, it allow to specify how it will..

Ops/Monitoring 2020. 1. 7. 19:38

Docker 이전 버전들이 있다면 삭제해주는게 좋다. 가끔이긴 하지만 이미 설치되어 있는거 때문에 설치가 안되는 경우가 더러 있다. $ sudo yum remove docker \ docker-client \ docker-client-latest \ docker-common \ docker-latest \ docker-latest-logrotate \ docker-logrotate \ docker-engine 설치 전 필요한 패키지 설치를 먼저 한다. $ sudo yum install -y yum-utils \ device-mapper-persistent-data \ lvm2 repositiory 설정 $ sudo yum-config-manager \ --add-repo \ https://download..

Ops/Kubernetes 2020. 1. 7. 14:38

DevOps로 거듭나기 위해 익혀야 할 기술들이 모니터링이다. 열심히 만들어 놓고 시스템이 어떻게 돌아가는지 보기 힘들면 그것도 여간 골치다. 운영을 하기위한 여러가지 모니터링 시스템들을 공부하던 중 기존 방식과 다른 Prometheus를 살펴보려고 한다. Prometheus 역시 요즘은 오픈 소스들이 활발하고 잘 만들어진 도구들이 많다. ELK, Telegraf 등을 만져보면서 시스템 메트릭 수집 도구로 잘 사용하고 있다가 다른 건 없나하다가 발견한 녀석이다. 공식 홈페이지 링크다. https://prometheus.io/ Prometheus - Monitoring system & time series database Some of our users include: prometheus.io 레퍼도 다양..

Ops/Monitoring 2019. 12. 17. 17:56

AWS에 대한 자세한 내용은 다른 글에서 다루도록 하겠습니다. 현재 많은 백엔드 엔지니어 또는 스타트업 개발자들이 AWS 생태계에서 개발을 많이 하고 있는 추세입니다. EC2를 올리고 퍼블릭 키를 통해 보안 접속을 하는 형태로 이용중이지만 팀에서 사용하기엔 번거로움이 있는 편이죠. 그래서 공개키 없이 접속을 할 경우도 발생하여 정리합니다. 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 # If you want to change the port on a SELi..

Ops/Cloud 2019. 12. 4. 12:06