일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | ||
6 | 7 | 8 | 9 | 10 | 11 | 12 |
13 | 14 | 15 | 16 | 17 | 18 | 19 |
20 | 21 | 22 | 23 | 24 | 25 | 26 |
27 | 28 | 29 | 30 |
- Opensearch
- 하이브
- 파이썬처럼생각하기
- gcp
- MLOps
- 쿠버플로
- TABNET
- 머신러닝
- elk
- yarn
- 파이썬답게생각하기
- hive
- 쿠버플로우
- Spark
- 쿠버네티스
- Kubernetes
- 데이터 플랫폼
- MachineLearning
- Tabular
- etl
- Python
- mesos
- fluentd
- 리눅스
- 데이터 아키텍처
- AWS Glue
- Kubeflow
- Minikube
- 파이썬
- Kibana
- Today
- Total
목록분류 전체보기 (52)
데이터를 걷는 선비
본 포스팅은 "파이썬 코딩의 기술(브렛 슬라킨 외 저)"를 보고 작성했습니다. 파이썬 주니어들이 시니어로 발돋움하기 위한 최고의 책이라고 생각되네요!! https://www.gilbut.co.kr/book/view?bookcode=BN002890 Effective Python 2nd 이펙티브 파이썬 : 파이썬 코딩의 기술 똑똑하게 코딩하는 법, 개정판 www.gilbut.co.kr 파이썬 함수에는 프로그래머가 더 편하게 프로그래밍할 수 있도록 해주는 여러가지 추가 기능이 들어있다. 이런 추가 기능을 사용하면 함수의 목적을 더 분명하게 표현할 수 있고, 코드의 잡음을 줄여서 함수 호출의 의도를 더 명확히 드러낼 수 있으며, 찾기 어려운 미묘한 버그를 현저히 줄일 수 있다. BETTER WAY 1 "함수가 ..

본 포스팅은 "데이터 플랫폼 설계와 구축(다닐 즈부리브스키 외 저)"를 보고 작성했습니다. http://acornpub.co.kr/book/cloud-data-platforms#toc 데이터 플랫폼 설계와 구축 다양한 소스에서 데이터를 수집하기 위한 패턴을 찾고, 클라우드 공급업체에서 제공하는 서비스를 활용하는 방법을 배울 수 있다. www.acornpub.co.kr [느슨하게 결합된 아키텍처] 처음 데이터 엔지니어링을 공부하다 보면 문득 드는 의문이 있다. '아니 기능이 왜 다 따로따로야...' '그냥 한 업체가 한 번에 다 만들면 안되나...' PaaS, SaaS, 서버리스, 오픈소스 등 넘쳐나는 엔지니어링 툴과 헷갈리는 기능들을 공부하다 보면 이러한 생각이 드는 것은 당연하다 생각한다. 예를 들어 ..

본 포스팅은 "데이터 플랫폼 설계와 구축(다닐 즈부리브스키 외 저)"를 보고 작성했습니다. http://acornpub.co.kr/book/cloud-data-platforms#toc 데이터 플랫폼 설계와 구축 다양한 소스에서 데이터를 수집하기 위한 패턴을 찾고, 클라우드 공급업체에서 제공하는 서비스를 활용하는 방법을 배울 수 있다. www.acornpub.co.kr '클라우드 데이터 플랫폼 계층 아키텍처 (2/3)' 클라우드 데이터 플랫폼 계층 아키텍처 (2/3) 본 포스팅은 "데이터 플랫폼 설계와 구축(다닐 즈부리브스키 외 저)"를 보고 작성했습니다. http://acornpub.co.kr/book/cloud-data-platforms#toc 데이터 플랫폼 설계와 구축 다양한 소스에서 데이터를 수집하..

본 포스팅은 "데이터 플랫폼 설계와 구축(다닐 즈부리브스키 외 저)"를 보고 작성했습니다. http://acornpub.co.kr/book/cloud-data-platforms#toc 데이터 플랫폼 설계와 구축 다양한 소스에서 데이터를 수집하기 위한 패턴을 찾고, 클라우드 공급업체에서 제공하는 서비스를 활용하는 방법을 배울 수 있다. www.acornpub.co.kr '클라우드 데이터 플랫폼 계층 아키텍처 (1/3)' https://semizero.tistory.com/12 [처리 계층(Processing)] 데이터 플랫폼 구현의 핵심은 처리(Processing) 계층이다!! 처리 계층은 비즈니스 로직 적용, 데이터 검증, 데이터 변환이 수행되는 곳이다. [수행 작업] 저속 데이터 스토리지와 고속 데이터..

본 포스팅은 "데이터 플랫폼 설계와 구축(다닐 즈부리브스키 외 저)"를 보고 작성했습니다. http://acornpub.co.kr/book/cloud-data-platforms#toc 데이터 플랫폼 설계와 구축 다양한 소스에서 데이터를 수집하기 위한 패턴을 찾고, 클라우드 공급업체에서 제공하는 서비스를 활용하는 방법을 배울 수 있다. www.acornpub.co.kr https://semizero.tistory.com/7 클라우드 데이터 플랫폼의 빌딩 블록(building block) 본 포스팅은 "데이터 플랫폼 설계와 구축(다닐 즈부리브스키 외 저)"를 보고 작성했습니다. http://acornpub.co.kr/book/cloud-data-platforms#toc 데이터 플랫폼 설계와 구축 다양한 소스..
본 포스팅은 "파이썬 코딩의 기술(브렛 슬라킨 외 저)"를 보고 작성했습니다. 파이썬 주니어들이 시니어로 발돋움하기 위한 최고의 책이라고 생각되네요!! https://www.gilbut.co.kr/book/view?bookcode=BN002890 Effective Python 2nd 이펙티브 파이썬 : 파이썬 코딩의 기술 똑똑하게 코딩하는 법, 개정판 www.gilbut.co.kr 파이썬은 리스트와 딕셔너리를 다룰 때 가독성을 좋게 하고 기능을 확장해주는 특별한 구문과 내장 모듈을 제공 다른 언어가 제공하는 단순 배열, 벡터, 해시 테이블 타입보다 훨씬 더 편리하게 딕셔너리와 해시 테이블을 사용할 수 있다!! BETTER WAY 1 "시퀀스를 슬라이싱하는 방법을 익혀라" 슬라이싱할 때는 간결하게 # 시각..
본 포스팅은 "파이썬 코딩의 기술(브렛 슬라킨 외 저)"를 보고 작성했습니다. 파이썬 주니어들이 시니어로 발돋움하기 위한 최고의 책이라고 생각되네요!! https://www.gilbut.co.kr/book/view?bookcode=BN002890 Effective Python 2nd 이펙티브 파이썬 : 파이썬 코딩의 기술 똑똑하게 코딩하는 법, 개정판 www.gilbut.co.kr BETTER WAY 6 "인덱스를 사용하는 대신 대입을 사용해 데이터를 언패킹해라" 파이썬은 한 문장 안에서 여러 값을 대입할 수 있는 언패킹이라는 특별한 문법 제공 인덱스를 사용해 시퀀스 내부에 접근하는 대신 언패킹을 사용해 시각적인 잡음을 줄이고, 코드 명확해짐 ☆ 언패킹을 사용하지 않을 경우 snacks = [('베이컨'..
본 포스팅은 "파이썬 코딩의 기술(브렛 슬라킨 외 저)"를 보고 작성했습니다. 파이썬 주니어들이 시니어로 발돋움하기 위한 최고의 책이라고 생각되네요!! https://www.gilbut.co.kr/book/view?bookcode=BN002890 Effective Python 2nd 이펙티브 파이썬 : 파이썬 코딩의 기술 똑똑하게 코딩하는 법, 개정판 www.gilbut.co.kr BETTER WAY 1 "사용 중인 파이썬의 버전을 알아두라" 파이썬 3는 파이썬 최신 버전이며 현재 가장 잘 지원됨, 파이썬 2는 사용하지 말기! 시스템에 있는 파이썬 실행 파일의 버전을 상시 확인! $ python --version Python 3.6.10 내장 모듈인 sys 값 검사 import sys print(sys...