某全球电子产品制造商借助F5扩展AI数据交付能力

高吞吐量数据路径让AI和分析管道持续高效运行

一家全球消费电子制造商对S3对象存储的需求迅速增长,仅靠存储网络已无法承载。F5 VELOS和BIG-IP帮助该公司保持AI和分析管道顺畅运行,从而更快获得洞察,保障大规模数据传输安全,并为未来增长留出空间。

业务挑战

一家大型消费电子产品制造商面向全球市场提供产品并服务客户。该公司接收数百万台已部署设备的遥测数据,并使用这些数据训练AI模型。其IT部门运营着一个自助式私有云,在公司自有数据中心内为内部团队按需提供存储、计算、网络和安全服务。兼容S3的对象存储是其基础服务之一,供公司各业务团队使用。

与许多在AI时代重新审视云经济性的企业一样,该公司决定将大量数据从公有云迁回本地部署环境。这些数据主要来自流式设备遥测和诊断数据。将这些数据迁回内部环境后,该公司获得了更大的控制权,也有了清晰的降本路径。同时,这也改变了其基础设施的需求模式。

“具备全新S3和AI功能的F5解决方案与Dell ObjectScale高度适配,可提供所需的性能、SSL吞吐量以及面向未来的平台。”

数据落地本地环境后,内部团队迅速将其投入使用。新的团队开始直接查询这些数据,新的数据湖和数据仓库相继出现,新的AI和分析用例几乎每周都会涌现。S3存储需求比环境中其他任何应用高出数个数量级,但公司的私有云并非为应对如此庞大的数据量和如此快的处理速度而构建。数据管道开始积压,原本几分钟即可完成的分析和模型训练作业需要耗费数小时。数据需求导致网络和存储层出现瓶颈,使分析和训练作业变得极其缓慢。公司需要一条可扩展的数据路径。

解决方案

该公司选择在Dell ObjectScale S3存储前端部署F5硬件,以构建可承载相应负载、具备弹性和高吞吐量的数据路径。F5解决方案与Dell ObjectScale秉持相同的设计重点:高性能、无需中断运营即可扩展的能力,以及对混合环境的有力支持。F5产品还提供出色的吞吐量、用于安全传输的强大SSL/TLS加密,以及专为AI工作负载构建的全新S3专用功能,其中包括F5 BIG-IP软件版本21中引入的S3配置文件。

该团队部署了搭载高性能BX520刀片的F5 VELOS,并运行F5 BIG-IP Local Traffic Manager (LTM)。这为公司的S3流量提供了专用硬件层,能够处理每秒数千兆位的流量需求,并承受AI工作负载造成的流量峰值。随着存储需求增长,只需添加刀片即可扩展该架构,且不会中断在线业务。

“随着工作负载持续增长,该平台可在未来多年高效扩展。”

BIG-IP LTM不仅能转发流量,还能在各存储节点之间智能分配S3对象请求,以保持高吞吐量和服务可用性。它会监测节点压力的早期迹象,并在热点导致管道停滞之前重新平衡数据摄取流量。它还对存储端点进行抽象,使AI和分析应用能够在底层存储扩展或变更时保持连接。由此形成的交付层可增强整个S3环境的韧性和可预测性。

在评估其他方案后,该公司发现,具备全新S3和AI功能的F5解决方案与Dell ObjectScale高度适配,并可提供组织长期发展所需的性能、SSL吞吐量和面向未来的平台。

成果

通过在存储系统前端部署专用的F5数据路径,该公司消除了拖慢工作进度的瓶颈。过去需要数小时才能完成的作业,如今可以更快地通过处理管道。团队能够在需要时获得答案,企业也能跟上需求,更快地回答问题并做出决策。

利用更多遥测数据,提升AI表现

F5解决方案使该公司能够保留和处理更长时间范围内的遥测数据(约30至45天),用于AI训练、推理和分析。F5解决方案可确保这些数据持续流动,从而支持更丰富、更大规模的数据收集、扩充和分析,帮助该公司训练出更好的模型并获得可付诸行动的洞察。该公司利用这些洞察预测设备故障,防患于未然,同时提高运营效率并优化运输和物流。

安全地大规模传输加密数据

传输中数据的保护不容妥协。F5解决方案可在整个部署环境中提供高性能SSL/TLS加密,并提供超过3,400 Gbps的SSL吞吐量,以应对持续增长的加密流量。敏感遥测数据可持续受到保护,同时不会拖累性能。

构建可随业务扩展的平台

由于VELOS架构无需重新设计,也不会造成停机即可扩展,因此随着新的AI和分析用例不断开发,公司可以持续增加容量,并放心地继续构建数据湖,因为数据路径能够满足扩展需求。

借助专为AI数据交付打造的技术联盟

此部署展示了F5与Dell技术联盟合作所能实现的成果。BIG-IP LTM与Dell ObjectScale协同工作,为AI提供具有韧性的高吞吐量S3数据交付;两家公司还在继续针对这一特定工作负载开展工程开发。近期成果包括BIG-IP软件v. 21中的S3配置文件,以及联合参考架构和市场推广材料,可帮助其他组织基于经过验证的设计扩展其AI数据管道。

对于这家消费电子产品制造商而言,这一合作关系为持续发展奠定了基础。随着工作负载不断增长,该平台未来多年都可高效扩展。

这为其他企业带来的启示很明确:随着AI需求推动数据量和数据传输速度不断攀升,专用的应用交付层可以将难以跟上需求的存储系统转变为可随需扩展的数据管道。

某全球电子产品制造商借助F5扩展AI数据交付能力 标志

优势

  • 消除拖慢AI和分析速度的S3瓶颈
  • 处理更多遥测数据,用于模型训练
  • 以数Gbps的规模保护传输中的加密数据
  • 灵活扩展以满足新的AI用例需求,无需停机

挑战

  • S3对象存储需求激增
  • 瓶颈导致分析和模型训练速度放缓
  • 大规模保障高吞吐量数据交付安全