Show HN: Archil의 원클릭 무한, S3 기반 로컬 디스크가 출시되었습니다

안녕하세요, 저는 Archil의 창립자 Hunter입니다. Archil은 Amazon S3와 같은 오브젝트 스토리지(object storage)를 무한하고 로컬 파일 시스템으로 변환하여 방대한 데이터 세트에 즉각적인 접근을 제공합니다.

작년에는 Hacker News에서 Archil의 NFS 기반 제품을 공개적으로 출시했으며(https://news.ycombinator.com/item?id=42174204), 이 커뮤니티의 반응에 매우 기뻤습니다.

지난번 출시 이후, 저희는 클라우드 인스턴스에 진정한 로컬과 같은 성능을 제공하기 위해 자체적인 맞춤형 스토리지 프로토콜을 구축하는 데 10개월간 전사적 투자를 했습니다. 이 프로토콜은 블록 스토리지 제품(block storage product)처럼 작동합니다. 오늘, 저희는 이 고성능 프로토콜의 공개 사용 가능성을 발표하게 되어 기쁩니다. 지금 바로 https://disk.new에서 클릭 한 번으로 무료로 사용해 보실 수 있습니다 (문서는 https://docs.archil.com 참고).

Amazon의 Elastic File System 같은 제품을 만들고, Netflix의 핵심 스토리지 팀에서 AWS 스토리지를 구매하는 등 스토리지 업계에서 10년을 보내면서, 저는 개발자들이 스토리지 사용에 엄청난 문제에 직면한다는 것을 알았습니다. Kubernetes 클러스터에서 사용하기 쉬운 영구 스토리지(persistent storage)를 확보하는 것은 간단하지 않으며, 애플리케이션이 급증하는 경우 필요한 스토리지가 얼마나 되는지 파악하는 것도 불가능할 수 있고, 기업들은 매우 비싼 스토리지(EFS 같은)나 사용하지 않는 용량(EBS의 경우처럼)에 과도하게 비용을 지불하는 것에 지쳐 있습니다.

EFS를 사용했던 경험을 통해서도 NFS가 해결책이 아니라는 것을 알았습니다. 사용자들은 여러 인스턴스에서 데이터를 공유하기 위해 EBS에서 EFS로 데이터를 옮겼을 때 10배의 성능 저하를 보고 실망했습니다.

이것이 바로 저희가 Archil을 구축한 이유입니다.

Archil은 애플리케이션과 함께 자동으로 성장하는 종량제(pay-as-you-go) 디스크입니다. Amazon S3 버킷과 같은 소스에 데이터를 양방향으로 동기화하기 때문에, 기존 데이터 세트에 즉시 연결할 수 있을 뿐만 아니라 S3 자체의 파일 데이터도 직접 사용할 수 있습니다.

Archil 디스크를 마운트하면 사용자의 인스턴스는 NVMe 장치를 갖춘 관리형 캐싱 플릿(managed caching fleet)의 인스턴스에 연결됩니다. 이 플릿은 S3와 같은 디스크 데이터 소스로 읽기 쓰기 캐싱(read-through and write-back caching)을 제공합니다. 저희는 분산되고 복제되며 고가용성(highly-durable)을 갖춘 캐시를 설계했기 때문에, 데이터를 S3에 다시 쓰기 전에 안전하게 저장할 수 있는 장소입니다. 사용자에게는 캐시에 활발하게 존재하는 데이터에 대해서만 비용을 청구하며, 디스크를 사용하지 않을 때는 Archil에 아무것도 지불하지 않습니다.

저희는 현재 최첨단 CI/CD 워커(workers)를 구축하고, 위성 이미지 처리를 수행하며, 서버리스 Jupyter Notebooks를 만들고, AI 네이티브 코드 샌드박스(예: NFS 공유에서 git을 직접 실행해 본 적 있으신가요?)를 생성하고, MCP 도구 대신 파일 시스템을 사용하는 최고 수준의 AI 에이전트를 구축하는 등 다양한 분야에서 저희와 협력하고 있는 초기 기업들에 대해 매우 기대하고 있습니다. 또한 게이트웨이나 컴퓨팅과 같은 핵심 AI 인프라 제공에도 도움을 주고 있습니다.

오늘 모든 분께 접근 권한을 드리고, 9월 한 달 동안은 비용이 발생하지 않을 예정입니다. 제품에 대한 어떤 피드백이라도 환영합니다. 만약 핵심 인프라 분야에서 깊고 기술적인 문제들을 다루는 작업에 관심이 있으시다면, 저희는 현재 San Francisco에서 채용을 진행하고 있으며 여러분의 이야기를 듣고 싶습니다 (https://www.ycombinator.com/companies/archil/jobs/svfkDVv-fo...).