Korean
Scality는 현대 기업 AI 파이프라인 내 만연한 구조적 문제를 해결하기 위해 맞춤화된 지능형 데이터 플랫폼인 ADI(자율 데이터 인프라)를 공개했습니다. 성숙한 객체 스토리지 기반을 기반으로 구축된 Scality의 차세대 핵심 솔루션 역할을 하는 ADI는 자율 데이터 관리 기능으로 회사의 인프라 스택을 확장합니다. 분산된 엔터프라이즈 클러스터에서 실행되는 AI 훈련 및 추론 워크로드를 위해 안전하고 관리 가능한 데이터 조정을 제공하도록 설계되었습니다.
Scality 코어 스토리지 기반
AI 워크로드가 격리된 모델 교육에서 반복적인 데이터 처리 및 자동화된 분석 작업으로 확장됨에 따라 운영 주기 전반에 걸쳐 규정을 준수하고 주권적인 데이터 제어를 유지하는 것이 매우 중요해졌습니다. 기존 스토리지 아키텍처에서는 사일로화된 스토리지 풀과 단절된 보안 정책으로 인해 중요한 기업 데이터가 단편적으로 관리됩니다. 이로 인해 데이터 마이그레이션이 반복되고 복사본이 중복 생성되어 대기 시간, 관리 오버헤드 및 운영 비용이 증가합니다. Scality는 이러한 비효율적인 워크플로우를 엑사바이트 규모의 비즈니스 환경에서 급격히 증폭되는 시스템적 결함인 "데이터 조각화 세금"으로 정의합니다.
ADI는 최적화된 액세스 대기 시간으로 엑사바이트 규모의 풀링이 가능한 통합된 자율 데이터 관리 계층을 통해 이러한 문제점을 완화하도록 설계되었습니다. AI 워크플로우 전반에 걸쳐 이기종 데이터 자산을 통합함으로써 플랫폼은 중복된 데이터 이동을 줄이고 전반적인 인프라 활용도를 높입니다. Scality의 내부 벤치마크 데이터는 엔터프라이즈급 동시성에서 간소화된 데이터 수집 대기 시간을 검증합니다. 다중 랙 GPU 클러스터 및 긴 컨텍스트 데이터 세트 처리 기능을 갖춘 일반적인 배포에서 리소스 활용도는 약 52%에서 91% 이상으로 증가하여 연간 인프라 지출이 크게 절감되었습니다.
Scality의 제품 경영진은 소규모 테스트 환경에서는 데이터 조각화가 미미하지만 기업 규모에서는 눈에 띄는 운영 병목 현상으로 이어진다고 말했습니다. 비즈니스 AI 클러스터가 확장됨에 따라 반복적인 데이터 복제 및 풀 간 마이그레이션으로 인해 인건비 및 규정 준수 위험이 높아지므로 안전하고 지속 가능한 AI 배포를 위해 자율 거버넌스 시스템이 필수 불가결해졌습니다.
성과-주권 균형 문제 해결
레거시 엔터프라이즈 인프라로 인해 팀은 처리 성능과 데이터 주권 사이에서 타협을 해야 합니다. 올플래시 어레이와 같은 고속 스토리지 계층은 대기 시간이 짧은 액세스를 제공하지만 배포 비용이 높고 규정 준수 사용자 정의가 제한적입니다. 이와 대조적으로 아카이브 스토리지 시스템은 대규모 용량과 강력한 거버넌스를 제공하지만 데이터 검색 속도가 느려 동적 AI 반복 및 실시간 데이터 분석 작업과 호환되지 않습니다.
엔터프라이즈 플래시 스토리지
ADI는 가속화된 데이터 액세스와 엄격한 주권 거버넌스의 균형을 맞추는 자율 미들웨어 계층을 도입하여 이러한 업계 격차를 해소합니다. 최신 GPU 가속기와 기본적으로 호환되고 Scality Guardian 지능형 스케줄링 엔진과 통합된 이 솔루션을 사용하면 전체 엔터프라이즈 클러스터가 AI에 최적화된 전송 속도로 통합 데이터 풀에 액세스할 수 있습니다. 이 설계는 격리된 스토리지 파티션 간의 번거로운 데이터 중복을 제거하여 서비스 대기 시간을 낮추고 클러스터 처리량을 높입니다.
지능형 스토리지 컨트롤러
AI 워크로드에 최적화된 아키텍처
엔터프라이즈 AI 데이터 파이프라인 전용으로 맞춤화된 ADI는 Scality의 최신 데이터 계층 구조 프레임워크의 중간 거버넌스 계층에 적합합니다. 분리된 스토리지 인프라를 기반으로 구축되어 최적화된 I/O 대기 시간을 유지하면서 엑사바이트 수준의 확장을 달성하고 GPU 컴퓨팅 리소스에서 스토리지 확장성을 성공적으로 분리합니다.
이 시스템은 엄격한 기존 스토리지 아키텍처를 버리고 엔드투엔드 오프로드 전송을 통해 이기종 스토리지 미디어 전반에 걸쳐 데이터를 직접 마이그레이션합니다. 이는 중복 프로토콜 변환, 메타데이터 중복성 및 수동 개입으로 인한 성능 오버헤드(레거시 파일 및 객체 스토리지 시스템에서 흔히 발생하는 병목 현상)를 줄여줍니다.
출처: Scality 공식
주요 아키텍처 최적화에는 타사 미들웨어에 대한 의존도를 줄이기 위해 스토리지 계층에 직접 내장된 ARM64 및 x86 하이브리드 서버의 기본 배포가 포함됩니다. 모든 데이터 예약 및 마이그레이션은 반복적인 수동 구성 워크플로를 우회하여 자동 지능형 오케스트레이션을 채택합니다. 또한 ADI는 기존 고정 스토리지 블록 대신 AI 일괄 처리 특성에 최적화된 4MB~16MB 범위의 맞춤형 블록 크기를 활용합니다. 고급 이더넷 및 PCIe Gen5와 같은 최첨단 고속 상호 연결 패브릭을 지원하여 엔터프라이즈 클러스터 전체에서 유선 속도에 가까운 데이터 전송을 촉진합니다.
유효성
Scality ADI는 이제 글로벌 엔터프라이즈 프로덕션 배포에 상용화되었습니다.
베이징 Qianxing Jietong Technology Co., Ltd.
양샌디/글로벌 전략 이사
WhatsApp/위챗: +86 13426366826
이메일: yangyd@qianxingdata.com
웹사이트: www.qianxingdata.com/www.storagesserver.com
사업 초점:
ICT 제품 유통/시스템 통합 및 서비스/인프라 솔루션
20년 이상의 IT 유통 경험을 바탕으로 당사는 선도적인 글로벌 브랜드와 협력하여 신뢰할 수 있는 제품과 전문 서비스를 제공합니다.
“기술을 활용한 지능형 세상 구축” 신뢰할 수 있는 ICT 제품 서비스 제공업체!
양샌디/글로벌 전략 이사
WhatsApp/위챗: +86 13426366826
이메일: yangyd@qianxingdata.com
웹사이트: www.qianxingdata.com/www.storagesserver.com
사업 초점:
ICT 제품 유통/시스템 통합 및 서비스/인프라 솔루션
20년 이상의 IT 유통 경험을 바탕으로 당사는 선도적인 글로벌 브랜드와 협력하여 신뢰할 수 있는 제품과 전문 서비스를 제공합니다.
“기술을 활용한 지능형 세상 구축” 신뢰할 수 있는 ICT 제품 서비스 제공업체!