[AWS] NFS, s3fs-fuse 성능 테스트

728x90

[AWS] EFS로 NFS 구성하기

AWS EC2 환경에 EFS를 마운트 시켜 NFS를 구성해 보겠다. 1. EFS 파일시스템 생성 Amazon EFS에서 새로운 파일 시스템을 생성한다. (생성시 설정해야 하는 모든 옵션은 기본값으로 설정하였다.) 미리 생성

welldonecode.tistory.com

[AWS] s3fs-fuse 설치하기

s3fs-fuse란 파일시스템을 AWS S3 스토리지에 마운트하여 클라우드 스토리지를 로컬 파일시스템처럼 사용할 수 있도록 해주는 오픈소스 소프트웨어다. EC2 amazon Linux 환경에서 설치를 진행하였다. 1.

welldonecode.tistory.com

실험 환경 설정은 위의 두 게시물을 참고하기 바란다.

연구 관련하여 s3fs-fuse를 개선시킨 Trilio 사의 성능 테스트를 보고 있었는데

s3fs-fuse를 통한 연결이 nfs 연결보다 현저하게 느렸다.

(100GB 크기의 파일 복사 시 :

NFS : 2G/min, s3fs-fuse : 1.42G/min)

혹시나 s3fs-fuse의 최신 버전은 개선이 되지 않았을까.. 하는 희망에 직접 테스트를 진행 해 보았다.

s3fs-fuse의 master 로부터 clone은 2024/01/03 일에 진행하였다. 참고하시라..

Experiments

5GB 크기의 더미 파일을 생성하여 nfs마운트 디렉토리와 s3fs-fuse마운트 디렉토리에 각각 복사하여 시간을 측정하였다.

nfs -> 3.70GB/min

s3fs-fuse -> 1.82GB/min

2배 차이..... s3fs-fuse는 너무 느리다..

728x90