์ผ | ์ | ํ | ์ | ๋ชฉ | ๊ธ | ํ |
---|---|---|---|---|---|---|
1 | 2 | 3 | 4 | 5 | 6 | 7 |
8 | 9 | 10 | 11 | 12 | 13 | 14 |
15 | 16 | 17 | 18 | 19 | 20 | 21 |
22 | 23 | 24 | 25 | 26 | 27 | 28 |
29 | 30 | 31 |
- aws
- off heap memory
- CI/CD
- Kubernetes
- Speculative Execution
- Dag
- SQL
- KDT_TIL
- disk spill
- Spark Caching
- mysql
- backfill
- Spark SQL
- Docker
- DataFrame Hint
- Kafka
- ๋น ๋ฐ์ดํฐ
- ๋ฐ์ดํฐ ํ์ดํ๋ผ์ธ
- Spark
- Airflow
- AQE
- Spark ์ค์ต
- redshift
- etl
- colab
- Salting
- topic
- k8s
- spark executor memory
- Spark Partitioning
- Today
- Total
JUST DO IT!
AWS CLI - TIL230518 ๋ณธ๋ฌธ
๐ KDT WEEK 7 DAY 4 TIL
- AWS CLI
๐ฅ AWS CLI
AWS ์๋น์ค๋ฅผ ํฐ๋ฏธ๋์์๋ ์ด์ฉํ ์ ์๋ ์๋น์ค์ด๋ค.
pip install awscli
๋ช ๋ น์ด๋ฅผ ์ ๋ ฅํ์ฌ AWS CLI๋ฅผ ์ค์นํ๋ค.
AWS CLI๋ฅผ ์ฌ์ฉํ๊ธฐ ์ํด์๋ user ์ ๋ณด๊ฐ ํ์ํ๋ฏ๋ก IAM๋ฅผ ์จ์ ํ ์คํธ ์ฌ์ฉ์๋ฅผ ํ๋ ๋ง๋ค์๋ค.
์ก์ธ์ค ๋ฐ ๋น๋ฐ ์์ธ์ค ํค๊ฐ CLI ์ ์ ์ค์ ์ ํ์ํ ๋ด์ฉ์ด๋ค.
์ด์ ํฐ๋ฏธ๋์์ aws configure ๋ช ๋ น์ด๋ฅผ ์ ๋ ฅํ๊ณ ๋ฐ์๋ ํค๋ฅผ ์ ๋ ฅํด์ค๋ค.
์ฌ๊ธฐ์ S3๋ฅผ ์ฝ์ด์ค๋ ค๋ฉด aws s3 ls ๋ช ๋ น์ด๋ฅผ ์ ๋ ฅํ๋ฉด ๋์ง๋ง,
๊ธฐ๋ณธ์ ์ผ๋ก ์ฌ์ฉ์๋ ๊ถํ์ด ์์ผ๋ฉด ์๋ฌด๊ฒ๋ ํ ์ ์์ผ๋ฏ๋ก S3์ ๋ํ ๊ถํ์ ์ถ๊ฐํด์ฃผ์ด์ผ ํ๋ค.
ReadOnlyAccess ๋ฟ๋ง์๋๋ผ FullAccess ๊ถํ์ ์ค๋ค๋ฉด ๋ค์ ๋ช ๋ น์ด๋ก S3 ๋ฒํท์ ๋ง๋ค์๋์๋ค.
- aws s3 mb s3://๋ฒํท์ด๋ฆ : S3 ์ ๋ฒํท ์์ฑ
- aws s3 sync . s3://๋ฒํท์ด๋ฆ : ํ์ฌ ํด๋์ ๋ชจ๋ ๋ด์ฉ์ ํด๋น ๋ฒํท์ ์ ์ฌ
- aws s3 rm s3://๋ฒํท์ด๋ฆ --recursive : ํด๋น ๋ฒํท์ ๋ด์ฉ์ ํ์ ํด๋๊น์ง(--์ต์ ) ๋ชจ๋ ์ญ์
S3์ ๋ง์ฐฌ๊ฐ์ง๋ก ๋ค๋ฅธ ์๋น์ค๋ค๋ CLI๋ก ์ ์ด๊ฐ ๊ฐ๋ฅํ๋ค.
๋ค๋ฅธ ์๋น์ค ์ง์๊ณผ ๋ช ๋ น์ด๋ ์๋ ๋งํฌ์์ ํ์ธํ ์ ์๋ค.
https://docs.aws.amazon.com/cli/latest/userguide/cli-chap-services.html
์ข ํฉ ์ค์ต์ TIL230517์ ํฉ์ณ์ ๊ธฐ๋ก
'TIL' ์นดํ ๊ณ ๋ฆฌ์ ๋ค๋ฅธ ๊ธ
๋ฐ์ดํฐ ํ๊ณผ ๋ฐ์ดํฐ ์จ์ดํ์ฐ์ค - TIL230522 (2) | 2023.05.22 |
---|---|
Docker์ Docker File - TIL230519 (0) | 2023.05.19 |
AWS IAM, S3, CI/CD, ์ข ํฉ์ค์ต - TIL230517 (0) | 2023.05.17 |
AWS EC2 ๊ธฐ๋ณธ ์ฉ์ด ๋ฐ ์ธ์คํด์ค ์์ฑํ๊ธฐ(TIL 230515) (0) | 2023.05.15 |
SQL ํ์ต - Transaction(for Python) & ์ถ๊ฐ SQL ๋ฌธ๋ฒ (TIL 230512) (0) | 2023.05.12 |