글로벌 전자제품 제조업체, F5로 AI 데이터 전송 확장
고처리량 데이터 경로로 AI 및 분석 파이프라인을 원활하게 운영
글로벌 가전제품 제조업체의 S3 객체 스토리지에 대한 수요가 급증하면서 스토리지 네트워크만으로는 이를 감당할 수 없게 되었습니다. F5 VELOS와 BIG-IP는 이 기업이 AI 및 분석 파이프라인을 원활하게 운영하여 더 빠르게 인사이트를 확보하고, 대규모 데이터 전송을 안전하게 보호하며, 향후 확장 여력까지 확보할 수 있도록 지원했습니다.
비즈니스 과제
세계 최대 소비자 전자제품 제조업체 중 하나인 이 기업은 전 세계 시장에 제품을 공급하고 고객에게 서비스를 제공합니다. 현장에서 사용 중인 수백만 대의 자사 기기로부터 텔레메트리 데이터를 수집하고, 이를 AI 모델 학습에 활용합니다. 이 기업의 IT 조직은 사내 팀이 자체 데이터 센터 내에서 스토리지, 컴퓨팅, 네트워킹 및 보안 리소스를 온디맨드로 이용할 수 있도록 셀프서비스 프라이빗 클라우드를 운영합니다. S3 호환 오브젝트 스토리지는 핵심 기반 서비스 중 하나로, 전사 여러 팀에서 사용되고 있습니다.
AI 시대에 클라우드의 경제성을 재검토하는 많은 기업과 마찬가지로, 이 회사는 대량의 데이터를 퍼블릭 클라우드에서 사내 환경으로 이전하기로 결정했습니다. 이러한 데이터의 가장 큰 비중을 차지한 것은 기기에서 스트리밍되는 텔레메트리 및 진단 데이터였습니다. 데이터를 사내로 가져오면서 회사는 통제력을 강화하고 비용을 절감할 수 있는 명확한 방안을 확보했습니다. 또한 인프라에 대한 수요 양상도 달라졌습니다.
“새로운 S3 및 AI 기능을 갖춘 F5 솔루션은 Dell ObjectScale과 원활하게 연동되었으며, 필요한 성능과 SSL 처리량은 물론 미래에도 경쟁력을 유지할 수 있는 플랫폼을 제공했습니다. ”
데이터가 온프레미스 환경에 저장되자 내부 팀들은 이를 활용하기 위해 신속하게 움직였습니다. 새로운 그룹들이 데이터를 직접 쿼리하기 시작했고, 새로운 데이터 레이크와 웨어하우스가 구축되었습니다. 새로운 AI 및 분석 활용 사례도 거의 매주 등장했습니다. S3 스토리지 수요는 해당 환경의 다른 모든 애플리케이션보다 몇 자릿수나 큰 규모로 증가했지만, 회사의 프라이빗 클라우드는 이러한 데이터 규모와 처리 속도를 감당하도록 구축되지 않았습니다. 파이프라인에는 작업이 적체되었고, 몇 분이면 끝나야 할 분석 및 모델 학습 작업에 몇 시간이 걸렸습니다. 데이터 수요로 인해 네트워크와 스토리지 계층에 병목 현상이 발생하면서 분석 및 학습 작업 속도는 현저히 느려졌습니다. 회사에는 확장성을 고려해 구축된 데이터 경로가 필요했습니다.
솔루션
이 회사는 부하를 감당할 수 있는 복원력과 높은 처리량을 갖춘 데이터 경로를 구축하기 위해 Dell ObjectScale S3 스토리지 앞단에 F5 하드웨어를 배포하기로 했습니다. F5 솔루션과 Dell ObjectScale은 고성능, 운영 중단 없는 확장성, 하이브리드 환경에 대한 강력한 지원이라는 동일한 설계 우선순위를 공유합니다. 또한 F5 제품은 업계 최고 수준의 처리량, 안전한 전송을 위한 강력한 SSL/TLS 암호화, 그리고 F5 BIG-IP 소프트웨어 버전 21에 도입된 S3 프로파일을 비롯해 AI 워크로드용으로 설계된 새로운 S3 전용 기능을 제공합니다.
팀은 고성능 BX520 블레이드가 탑재된 F5 VELOS를 구축하고 F5 BIG-IP Local Traffic Manager (LTM)를 실행했습니다. 이를 통해 회사의 S3 트래픽을 위한 전용 하드웨어 계층을 마련하여 초당 수 기가비트의 수요를 처리하고 AI 워크로드로 인한 트래픽 급증을 흡수할 수 있게 되었습니다. 스토리지 요구 사항이 증가하면 운영 중인 서비스의 중단 없이 블레이드를 추가하는 것만으로 아키텍처를 확장할 수 있습니다.
“워크로드가 계속 증가하더라도 이 플랫폼은 향후 수년간 효율적으로 확장할 수 있습니다.”
BIG-IP LTM은 단순히 트래픽을 전달하는 데 그치지 않습니다. S3 객체 요청을 스토리지 노드 전반에 지능적으로 분산하여 높은 처리량과 서비스 가용성을 유지합니다. 또한 노드에 부하가 발생하는 초기 징후를 감지하고, 핫스팟으로 인해 파이프라인이 중단되기 전에 수집 트래픽의 균형을 재조정합니다. 스토리지 엔드포인트도 추상화하므로 기반 스토리지가 확장되거나 변경되더라도 AI 및 분석 애플리케이션의 연결이 유지됩니다. 그 결과 전체 S3 환경의 복원력과 예측 가능성을 높이는 전송 계층이 구현됩니다.
다른 옵션을 평가한 결과, 이 기업은 새로운 S3 및 AI 기능을 갖춘 F5 솔루션이 Dell ObjectScale과 원활하게 연동되며, 조직의 장기적인 역량 강화를 위해 필요한 성능과 SSL 처리량, 미래 지향적인 플랫폼을 제공한다는 사실을 확인했습니다.
결과
스토리지 앞단에 전용 F5 데이터 경로를 구축함으로써 이 회사는 업무 속도를 저하시켰던 병목 현상을 해소했습니다. 이전에는 몇 시간씩 걸리던 작업이 이제 파이프라인을 통해 훨씬 빠르게 처리됩니다. 팀은 필요할 때 답을 얻을 수 있으며, 기업은 더 신속하게 질문에 답하고 더 빠르게 의사 결정을 내려야 하는 요구에 발맞출 수 있게 되었습니다.
더 많은 텔레메트리 데이터를 더 나은 AI로 전환
F5 솔루션을 통해 이 기업은 훨씬 더 긴 기간(약 30~45일)의 텔레메트리 데이터를 보관하고 처리하여 AI 학습, 추론 및 분석에 활용할 수 있습니다. F5 솔루션은 이러한 데이터가 지속적으로 흐르도록 지원하므로, 더욱 풍부한 대용량 데이터를 수집하고 보강 및 분석하여 더 우수한 모델을 학습하고 실행 가능한 인사이트를 도출할 수 있습니다. 이 기업은 이러한 인사이트를 활용해 디바이스 장애를 사전에 예측하고, 운영 효율성을 높이며, 배송 및 물류를 최적화합니다.
암호화된 데이터를 대규모로 안전하게 전송
전송 중인 데이터를 보호하는 것은 타협할 수 없는 필수 요건이었습니다. F5 솔루션은 전체 배포 환경에서 고성능 SSL/TLS 암호화를 제공하며, 3,400Gbps 이상의 SSL 처리량을 통해 증가하는 암호화 트래픽을 처리할 수 있습니다. 민감한 원격 측정 데이터는 성능 저하 없이 안전하게 보호됩니다.
비즈니스와 함께 성장하는 플랫폼 구축
VELOS 아키텍처는 재설계 작업이나 서비스 중단 없이 확장할 수 있으므로, 새로운 AI 및 분석 사용 사례가 개발됨에 따라 회사는 용량을 계속 추가할 수 있습니다. 또한 데이터 경로가 증가하는 수요를 충분히 감당할 것이라는 확신을 갖고 데이터 레이크를 지속적으로 구축할 수 있습니다.
AI 데이터 제공을 위해 구축된 기술 제휴 활용
이 배포 사례는 F5와 Dell의 기술 제휴 파트너십이 제공할 수 있는 가치를 보여줍니다. BIG-IP LTM은 Dell ObjectScale과 연동하여 AI를 위한 복원력과 높은 처리량을 갖춘 S3 데이터 전송을 지원하며, 양사는 이 특정 워크로드에 최적화된 기술을 지속적으로 개발하고 있습니다. 최근 성과로는 BIG-IP 소프트웨어 v. 21의 S3 프로파일과 더불어, 다른 조직이 검증된 설계를 기반으로 자체 AI 데이터 파이프라인을 확장하는 데 도움이 되는 공동 참조 아키텍처 및 시장 출시 자료가 있습니다.
이 소비자 전자제품 제조업체에게 이러한 파트너십은 지속적인 발전의 토대가 됩니다. 워크로드가 계속 증가하더라도 향후 수년간 플랫폼을 효율적으로 확장할 수 있기 때문입니다.
다른 기업들이 얻을 수 있는 교훈은 간단합니다. AI 수요로 데이터의 양과 처리 속도가 증가함에 따라, 전용 애플리케이션 딜리버리 계층을 도입하면 급증하는 요구를 감당하기 벅찬 스토리지를 확장 가능한 파이프라인으로 전환할 수 있습니다.
이점
- AI 및 분석 속도를 저하시키는 S3 병목 현상 제거
- 모델 학습을 위해 더 많은 텔레메트리 데이터를 처리
- 멀티 Gbps 규모로 전송 중인 암호화 데이터를 안전하게 보호
- 다운타임 없이 새로운 AI 사용 사례에 맞게 확장
과제
- 급증하는 S3 객체 스토리지 수요
- 분석 및 모델 학습 속도를 저하시키는 병목 현상
- 대규모 환경에서 고처리량 데이터 전송 보안 확보