YJWANG

https://yjwang.tistory.com/entry/EFK-on-k8s 이전에 작성한 위 포스팅을 따라 EFK를 Kubernetes 위에 구축할 수 있다. 기본으로는 각 Node에 있는 docker log들을 수집하며 로그가 삭제되지 않고 지속적으로 수집된다. 하여 수동 혹은 자동으로 로그를 삭제할 필요가 생기게 되는데 오늘은 이에 대한 포스팅을 다루려고한다. 참고 : https://blog.chesterwood.io/2019/06/how-to-delete-old-elasticsearch-logs.html 삭제 진행 삭제 전 아래 캡쳐와 같이 2월 5일자 Log가 수집돼있는 것을 볼 수 있다. elasticsearch는 logstash-2019.04.04 과 같이 일별로 로그가 저장되며 2월 5일..

https://yjwang.tistory.com/entry/Prometheus-kube-prometheus-stack-Rule-%EC%B6%94%EA%B0%80-Prometheus-Opertaor 위 게시글과 동일하게 kube-prometheus-stack 혹은 prometheus-operator 설치할 때 사용한 vaules.yaml를 사용할 예정입니다. 1. Slack Alarm 추가 사전에 Slack App에서 Incomming WebHook을 설정해놓으셔야합니다. refer to https://grafana.com/blog/2020/02/25/step-by-step-guide-to-setting-up-prometheus-alertmanager-with-slack-pagerduty-and-gmail..

Helm Chart 설치 시 사용했던 values 파일을 이용하여 Rule을 설정한다. root@master01:~/kube-prometheus-stack# vim /root/kube-prometheus-stack/values.yaml annotation을 추가해보려했으나 값이 없다고 에러가 발생한다. 아직 지원을 하지 않는 것인지 내가 못하는 것인지는 모르겠다. additionalPrometheusRulesMap: rule-name: groups: - name: testRule rules: - alert: test-alert-1 expr: up{service="p1-grafana"} == 1 for : 1m - alert: test-alert-2 expr: up{service="p1-grafana"} ..

프로메테우스 타임존 설정은 변경 불가 합니다. 아래 공식 문서에서 볼 수 있듯이 여러 Timezone 변경으로 인한 Data 충돌 문제를 방지하고자 UTC를 기본적으로 사용합니다. https://prometheus.io/docs/introduction/faq/#can-i-change-the-timezone-why-is-everything-in-utc 따라서 모니터링 된 데이터를 현재 Timezone으로 확인해야 하는 경우 Grafana에서 변경하면 됩니다. Grafana > Configuration > Preferences 혹은 각 Dashboard에서 설정할 수도 있습니다. Dashboard > Dashboard Settings > Timezone

우분투 패키지 업데이트 우선 업데이트할 항목이 있는지 repo를 update한다. yjwang@yjwang-ThinkPad-T14s-Gen-1:~$ sudo apt update 기존:1 http://packages.microsoft.com/repos/vscode stable InRelease 기존:2 http://dl.google.com/linux/chrome/deb stable InRelease 기존:3 http://ppa.launchpad.net/gns3/ppa/ubuntu focal InRelease 기존:4 http://kr.archive.ubuntu.com/ubuntu focal InRelease 받기:5 http://security.ubuntu.com/ubuntu focal-security I..