| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | 2 | 3 | ||||
| 4 | 5 | 6 | 7 | 8 | 9 | 10 |
| 11 | 12 | 13 | 14 | 15 | 16 | 17 |
| 18 | 19 | 20 | 21 | 22 | 23 | 24 |
| 25 | 26 | 27 | 28 | 29 | 30 | 31 |
- ETL
- truncate
- SQL
- spark
- Django Rest Framework(DRF)
- 데이터파이프라인
- redshift
- docker hub
- 데이터 웨어하우스
- yarn
- Hive
- Kafka
- dag 작성
- airflow
- AWS
- Serializer
- snowflake
- selenium
- 웹 스크래핑
- docker-compose
- docker
- dag
- Django
- 알고리즘
- 데이터레이크
- 데이터마트
- 컨테이너 삭제
- airflow.cfg
- ELT
- 웹 크롤링
- Today
- Total
목록docker (2)
개발 기록장
05. 대시보드 소개와 구현
학습 주제: 다양한 시각화 툴, Superset 소개 및 실습, MAU 차트, Cohort 차트다양한 시각화 툴시각화 툴대시보드 또는 BI(Business Intelligence) 툴이라고 부르기도 함KPI(Key Performance Indicator, 지표, 중요한 데이터 포인트들을 데이터 기반으로 계산/표시/분석 해주는 툴데이터 기반(Data-Driven Decision) 의사결정을 지원함현업 종사자들이 데이터 분석을 쉽게 할 수 있게 함시각화 툴의 종류Excel, Google, Spreadsheet: 가장 많이/쉽게 쓰이는 시각화 툴Python: 데이터 특성분석(EDA)에 더 적합EDA(Explordatory Data Analaysis): Data를 사용하기 전 데이터 특성에 대해 알아보는 것(e..
01. Docker에서 Superset 설치 방법 및 오류 해결(맥북 M1)
Superset을 Docker위에 설치하기 위해 공식문서, 블로그 등 다양한 것을 참고하였다. 설치 가이드는 많지만 내가 마주한 오류를 해결하는 방법에 대한 글은 찾지 못해 해결에 오랜 시간이 걸렸다. 나와 같은 오류 상황에 처한 사람에게 이 글이 조금이나마 도움이 되길 바란다:)1. Docker 설치운영체제에 맞는 Docker을 설치한다 Docker 설치Docker 설정Superset은 꽤 무거운 프로그램으로 사양 설정이 매우 중요한 것 같다.2. Superset repo clone터미널을 켜고, superset repo를 clone한다.나는 빈 폴더를 하나 만들고 그 안에 clone 했다.(ex. 빈 폴더/superset...) git clone https://github.com/apache/sup..