Notice
Recent Posts
Recent Comments
Link
| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | 2 | 3 | 4 | |||
| 5 | 6 | 7 | 8 | 9 | 10 | 11 |
| 12 | 13 | 14 | 15 | 16 | 17 | 18 |
| 19 | 20 | 21 | 22 | 23 | 24 | 25 |
| 26 | 27 | 28 | 29 | 30 | 31 |
Tags
- Spark Caching
- Spark Partitioning
- Salting
- CI/CD
- KDT_TIL
- redshift
- SQL
- 빅데이터
- Spark SQL
- AQE
- disk spill
- Docker
- backfill
- Spark
- etl
- DataFrame Hint
- Kafka
- spark executor memory
- Dag
- Kubernetes
- aws
- mysql
- Airflow
- Speculative Execution
- off heap memory
- colab
- 데이터 파이프라인
- topic
- Spark 실습
- k8s
Archives
- Today
- Total
목록데이터품질 (1)
JUST DO IT!
Redshift cluster 생성 및 SQL 데이터 품질 체크 (TIL 230509)
📚 KDT WEEK 6 DAY 2 TIL Redshift 생성 웹 서비스에서 사용자와 세션 정보 데이터 품질 체크 🟥 Redshift Cluster 만들어보기 https://aws.amazon.com/ko/ 클라우드 서비스 | 클라우드 컴퓨팅 솔루션| Amazon Web Services aws.amazon.com Redshift는 아마존에서 제공하는 데이터 웨어하우스 서비스이다. 위 aws 사이트에서 계정을 생성하고, redshift를 검색하여 해당 서비스를 이용할 수 있다. aws 계정 생성에는 최초 카드 등록이 필요했고, 100원을 이체했다가 다시 돌려준다. 내가 만들 Redshift 클러스터는 무료 버전이 존재하지만 시험삼아서 유료 버전을 만들어 보기로 한다. 로그인후, aws redshift 화면..
TIL
2023. 5. 10. 12:00