Google Cloud Managed Lustre

"기업이 딥페이크 오디오, 동영상, 이미지를 식별하고 차단하도록 지원하는 당사의 역량은 모델의 성능에 달려 있습니다. Managed Lustre는 동적 데이터 세트를 사용한 성공적인 모델 학습에 매우 중요합니다. GPU를 완전히 포화시키며, 당사에서 평가한 다른 스토리지 솔루션보다 6배 더 빠릅니다."

여기에서 성공사례를 확인하세요.

^{-조하이브 아흐메드, Resemble AI CEO}

"Managed Lustre를 사용하면 AFEELA Intelligent Drive의 AI 모델 학습을 다른 Google Cloud 솔루션 대비 3배 더 확장할 수 있습니다."

^{-카타오카 모토이, Sony Honda Mobility Inc. AI 및 데이터 분석 플랫폼 수석 관리자}

"Salesforce AI Research는 Managed Lustre를 VTC(Vertex Training Clusters)와 통합하여 일반적인 온보딩 병목 현상을 제거하고 추론 워크로드를 즉시 실행할 수 있었습니다. 처리량이 높고 지연 시간이 짧은 이러한 스토리지 덕분에 B200 GPU가 완전히 포화 상태를 유지하여 H200에 비해 대규모 언어 모델 추론에서 상당한 성능 향상을 이끌어낼 수 있습니다. 고객은 이전보다 훨씬 짧은 지연 시간으로 복잡한 추론을 처리할 수 있는 더 빠르고 반응성이 뛰어난 AI 에이전트를 직접적으로 활용할 수 있습니다."

^{-라바냐 카라남, Salesforce 수석 소프트웨어 엔지니어}

"Google Cloud로 이전한 후 연구 속도가 근본적으로 달라졌습니다. 제 작업은 대규모 데이터 세트에 대한 대규모 신경망 학습을 포함하는데, 여기에는 클러스터팀이 업로드하여 클러스터에서 직접 액세스할 수 있도록 해준 전체 Common Corpus도 포함됩니다. Google Cloud가 아니었다면 제가 실제로 액세스할 수 있는 어떤 인프라로도 전체 데이터 세트를 확보할 수 없었을 것입니다. Managed Lustre를 사용함으로써 이전에 파이프라인에서 병목 현상을 일으켰던 수집이 이제 몇 초 만에 완료되고, GPU가 일관되게 활용되며, 대기 시간도 훨씬 줄어들었습니다. 그 결과 제가 실행하는 모든 실험에서 인사이트를 도출하는 시간이 눈에 띄게 단축되었습니다."

^{크리스토퍼 J. 린치 박사, 올드 도미니언 대학교 버지니아 모델링, 분석, 시뮬레이션 센터(VMASC) 연구 조교수}

"Managed Lustre는 수학적 추론 모델에 대한 학습 실험을 실행할 때 발생하는 중단을 최소 50% 제거하여 실험을 두 배나 많이 실행할 수 있게 해 줍니다. 이 서비스를 '핫' 체크포인트의 리전 캐시로 통합하여 더 빠르고 안정적이며 편리한 시작 및 체크포인트 지속성을 달성했습니다. 당사 워크플로에서는 학습 작업이 후속 추론 또는 새로운 학습 작업이 오프라인 시스템에서 소비하는 체크포인트를 작성하므로 데이터 검색 속도가 최대 15배 증가하고 시작 시간이 50% 이상 단축됩니다. Lustre를 안정적인 마운트된 파일 시스템으로 사용하고 즉시 우수한 성능을 발휘할 수 있는 기능 덕분에 연구팀은 새로운 학습 기술을 실험할 때 더 자급자족할 수 있게 되었습니다. 또한 다른 스토리지 옵션에서 동일한 데이터를 가져올 때보다 우수한 성능을 유지하면서 반복 주기를 두 배로 늘릴 수 있게 되었습니다."

^{-라일리 패터슨, Harmonic 인프라 리드}