Notice
Recent Posts
Recent Comments
Link
| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | 2 | 3 | 4 | 5 | ||
| 6 | 7 | 8 | 9 | 10 | 11 | 12 |
| 13 | 14 | 15 | 16 | 17 | 18 | 19 |
| 20 | 21 | 22 | 23 | 24 | 25 | 26 |
| 27 | 28 | 29 | 30 | 31 |
Tags
- aws
- Kafka
- topic
- SQL
- DataFrame Hint
- Salting
- disk spill
- etl
- AQE
- Spark
- Speculative Execution
- KDT_TIL
- Spark 실습
- Docker
- Kubernetes
- 데이터 파이프라인
- k8s
- colab
- mysql
- redshift
- off heap memory
- Spark SQL
- spark executor memory
- Spark Partitioning
- Spark Caching
- CI/CD
- backfill
- Dag
- 빅데이터
- Airflow
Archives
- Today
- Total
목록docker volume (1)
JUST DO IT!
Docker Volume 알아보고 간단한 실습해보기 - TIL230614
📚 KDT WEEK 11 DAY 3 TIL Docker Volume 🟥 Docker Volume Docker Container가 실행되었다가 중단되는 것을 대비해서 데이터를 보관해두는 기능 Docker Container내의 가상 파일 시스템과 호스트 시스템의 파일 시스템을 맵핑(마운트)하여 사용한다. 다시 말해, Container와 Host 시스템이 특정 폴더를 공유하여 Container가 사라지더라도 데이터를 남게하는 것이다. ⚙️ 방법 docker run -v /home/USER/logs:/var/lib/airflow/logs 호스트 파일 시스템 Path : Container 파일 시스템 Path 방식으로 직접 마운트 docker run -v /var/lib/mysql/data 영구적으로 유지하고 싶..
TIL
2023. 6. 15. 18:24