[TIL] AWS cli를 사용해서 s3 파일 일괄 다운받기 220921

728x90

💡 Today I Learned 요약 (9회차)
- AWS CLI를 사용해서 s3 데이터를 일괄 다운 받을 수 있다
- 명령어는 aws cp를 사용하면 됨

 

AWS cli를 사용해서 s3 파일 일괄 다운받기

AWS s3에 있는 데이터를 다운 받고 싶을 때 웹 화면에서는 폴더 단위로 일괄 다운로드를 지원하지 않는다. 그래서 개별로 하나하나 들어가서 다운을 받아야 하는데 이럴 경우엔 AWS CLI를 쓰는 게 편리함.

 

1. AWS 홈페이지에서 CLI를 다운받고 설치

2. 터미널(명령 프롬프트)를 열고 aws configure를 입력하여 설정값 입력

aws configure
AWS Access Key ID [None]:
AWS Secret Access Key [None]: 
Default region name [None]: 
Default output format [None]:

3. aws s3 cp {s3 경로} {다운받을 로컬 경로} --recursive 를 통해서 파일 다운로드, 단일 파일 다운로드 시에는 recursive가 필요없지만, 폴더 전체를 다운받으려면 recursive 설정이 필요함.

aws s3 cp my-local-folder s3://my-s3-bucket/ --recursive

 

 

---

#AWS 관련 작성 및 리서치 내역:

• How to copy files recursively using AWS S3 cp?
  
• [S3]S3 버킷 폴더 다운로드하기

저작자표시비영리

'CLOUD > AWS' 카테고리의 다른 글

[TIL] AWS Athena에서 Json 값 추출 220927  (0)	2022.09.27
[TIL] AWS Athena에서 기존 파티션 drop하고, 신규 파티션 생성 220920  (0)	2022.09.20
OpenBLAS WARNING - could not determine the L2 cache size on this system, assuming 256k 와 같은 에러가 발생했을 때  (0)	2022.08.23
AWS Athena 쿼리 실행 시 일부 쿼리에서 Limit 무시하는 현상에 대해  (0)	2022.08.21
AWS lambda에서 계층 추가 시 ‘Layers consume more than the available size of 262144000 bytes’ 오류가 뜰 경우 대처 방안  (0)	2022.08.19