Notice
Recent Posts
Recent Comments
Link
| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | 2 | 3 | ||||
| 4 | 5 | 6 | 7 | 8 | 9 | 10 |
| 11 | 12 | 13 | 14 | 15 | 16 | 17 |
| 18 | 19 | 20 | 21 | 22 | 23 | 24 |
| 25 | 26 | 27 | 28 | 29 | 30 | 31 |
Tags
- DataFrame Hint
- Spark Caching
- off heap memory
- Salting
- disk spill
- Spark 실습
- k8s
- spark executor memory
- Dag
- Airflow
- backfill
- Spark
- 데이터 파이프라인
- Kubernetes
- CI/CD
- KDT_TIL
- AQE
- Speculative Execution
- 빅데이터
- mysql
- Kafka
- etl
- topic
- redshift
- Docker
- SQL
- Spark SQL
- aws
- Spark Partitioning
- colab
Archives
- Today
- Total
목록머신러닝 E2E (1)
JUST DO IT!
jupyter에서 머신러닝 End to End 실습해보기 - TIL230717
📚 KDT WEEK 16 DAY 1 TIL 머신러닝 E2E 실습 0. 실습 환경 설정 1. 테스트 데이터셋 만들기 2. 데이터 정제 3. 모델 훈련 4. 모델 세부 튜닝 5. 테스트 데이터셋 평가 6. 상용화를 위한 모델 저장 🟥 머신 러닝 End to End 실습 Machine Learning(기계학습) : 경험을 통해 자동으로 개선하는 컴퓨터 알고리즘 연구 캘리포니아 인구조사 데이터를 사용해 캘리포니아 주택 가격 예측모델 만들기 ⚒️ 0. 실습 환경 설정 virtualenv를 사용하여 가상환경안에서 작업하도록 한다. # 원하는 폴더안에서 작업 pip install virtualenv # 가상환경 virtualenv my_env # 원하는 이름 설정 # 가상환경 실행 source my_env/bin/a..
TIL
2023. 7. 20. 00:56