Notice
Recent Posts
Recent Comments
Link
일 | 월 | 화 | 수 | 목 | 금 | 토 |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | ||
6 | 7 | 8 | 9 | 10 | 11 | 12 |
13 | 14 | 15 | 16 | 17 | 18 | 19 |
20 | 21 | 22 | 23 | 24 | 25 | 26 |
27 | 28 | 29 | 30 | 31 |
Tags
- k8s
- aws
- spark executor memory
- Spark 실습
- CI/CD
- Docker
- 빅데이터
- disk spill
- redshift
- topic
- off heap memory
- Speculative Execution
- Spark SQL
- Spark
- KDT_TIL
- backfill
- etl
- Salting
- Kafka
- Kubernetes
- colab
- AQE
- mysql
- SQL
- Airflow
- Spark Partitioning
- DataFrame Hint
- Dag
- Spark Caching
- 데이터 파이프라인
Archives
- Today
- Total
목록POD (1)
JUST DO IT!

📚 KDT WEEK 11 DAY 5 TIL Docker를 사용하는 이유 - 서버 관리의 어려움 Docker Container를 관리하는 방법 - Container Orchestration K8s 🟥 서버 관리의 어려움 서버의 수가 많아지고 다양한 문제가 발생했을 때 문제를 해결하는 방법 1. Infrastructure As Code 대화형 명령이 아닌 자동화된 스크립트로 해결하고 다수의 서버에 명령을 대신 실행 DevOps 엔지니어가 꼭 알아야하는 기술 중 하나 하지만 배우기 어렵고, 소프트웨어 충돌 문제에는 크게 도움이 되지 않는다. ex. Chef, Puppet, Ansible, Terraform... 2. Virtual Machine 소프트웨어 충돌 해결을 위해 한 서버에 다수의 VM을 올려 서비스..
TIL
2023. 6. 20. 20:16