| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | 2 | 3 | 4 | 5 | ||
| 6 | 7 | 8 | 9 | 10 | 11 | 12 |
| 13 | 14 | 15 | 16 | 17 | 18 | 19 |
| 20 | 21 | 22 | 23 | 24 | 25 | 26 |
| 27 | 28 | 29 | 30 |
- Kubernetes
- Opensearch
- AWS Glue
- elk
- 파이썬처럼생각하기
- 쿠버네티스
- Tabular
- TABNET
- 데이터 아키텍처
- Spark
- 하이브
- mesos
- 쿠버플로우
- 리눅스
- MLOps
- Kibana
- hive
- fluentd
- Kubeflow
- 파이썬답게생각하기
- Minikube
- 데이터 플랫폼
- MachineLearning
- etl
- 쿠버플로
- 파이썬
- yarn
- 머신러닝
- Python
- gcp
- Today
- Total
목록Opensearch (3)
데이터를 걷는 선비
[ELK] 오픈소스(Fluentd, OpenSearch)로 ELK 스택 설치 후 실습해보기 (2)
[순서] 1) ELK 아키텍처 개괄 2) Fluentd 설치 3) Log Generator로 로그 생성 4) Opensearch 설치 5) Fluentd로 로그파일 읽어서 보내기
[ELK] 오픈소스(Fluentd, OpenSearch)로 ELK 스택 설치 후 실습해보기 (1)
[순서] 1) ELK 아키텍처 개괄 2) Fluentd 설치 3) Log Generator로 로그 생성 4) Opensearch 설치 Docker 설치는 공식문서 참조!! (공식문서가 제일 깔끔한 것 같습니다.) - WSL은 amd 기반의 cpu를 기준으로 함(arm은 꼭 공식 문서 및 별도 자료 참조!!) https://docs.docker.com/engine/install/ubuntu/ Install Docker Engine on Ubuntu docs.docker.com - ELK 스택에 대한 개념과 ELK가 아닌 Fluentd, Opensearch, Opensearch Dashboard로 실습하는 이유는 이전 포스트를 참고해주시면 감사하겠습니다!! https://semizero.tistory.com..
[ELK] 로그모니터링을 위한 ELK Stack 개념들!!
로컬에서 개인적인 개발을 진행할 경우에는 로그의 중요성을 체감하기 어렵다. 어차피 내가 진행한 작업환경이고 에러가 날 경우 시스템의 히스토리를 알기에 일일이 찾아서 수정하면 되기 때문이다. 그러나 회사 시스템 환경에서는 일일이 그럴 수 없기에 로그를 남기는 것이 필수적이고 시스템에 장애가 나면 로그를 빨리 분석해야 하기에 로그 수집을 위한 아키텍처 설계 작업이 매우 중요하다. [로그란??] Log 란, 컴퓨터가 수행하는 도중 유의미한 내용을 남기는 기록을 말한다. 통상 파일로 남기는 기록을 말한다. 로그의 내용 로그에는 통상 다음 내용이 들어가야 한다. 로그를 남긴 시간 로그 레벨 (심각성의 정도) FATAL > ERROR > WARN > DEBUG > TRACE 로그 내용 로그가 발생한 위치 로그를 남..