Skip to main content

Amazon S3를 사용해 공유받은 데이터 다운로드

Screenshot 2023-09-27 at 1.30.18 PM.png

데이터 설명

https://www.ncbi.nlm.nih.gov/sra/?term=SRR6327875

Screenshot 2023-09-27 at 11.45.33 AM.png

NOTE: SRA Lite 포멧에 대한 설명

Screenshot 2023-09-27 at 11.44.42 AM.png

데이터 준비

다운로드

wget https://sra-downloadb.be-md.ncbi.nlm.nih.gov/sos5/sra-pub-zq-14/SRR006/327/SRR6327875.sralite.1

R1, R2 파일로 추출

fastq-dump --split-files --gzip SRR6327875.sralite.1

AWS CLI 사용을 위한 credential 적용 

아래의 정보를 쉘에 복사하여 붙여넣습니다.

image.png

버킷 생성

aws s3api create-bucket \
    --bucket brandon-20230927 \
    --region us-east-1

AWS 계정 내 생성된 버킷 확인

S3 콘솔에서도 확인할 수 있음.

Screenshot 2023-09-27 at 1.30.49 PM.png

S3를 위한 AWS CLI 사용법

S3의 버킷 목록 조회

aws s3 ls

S3로 데이터 복사

aws s3 cp SRR6327875.sralite.1_1.fastq.gz s3://brandon-20230927/raw/SRR6327875_1.fastq.gz
aws s3 cp SRR6327875.sralite.1_2.fastq.gz s3://brandon-20230927/raw/SRR6327875_2.fastq.gz