节卡机器人用深信服aStor统一存储打通具身智能采集与训练链路
背景图 2026-09-28 15:50:39

节卡机器人面向工业机器人与具身智能场景开展产品和技术研发[1]。随着机器人在更多场景中持续采集图像、视频、关节状态、传感器读数与运行日志,项目要解决的已不只是把文件存下来,而是让同一批多模态数据经过校验、清洗和组织后,能及时被多台GPU服务器反复调用。因此,节卡机器人选择深信服aStor统一存储打通采集、数据准备与GPU训练链路,并为后续算力扩展提供统一数据底座。

一 具身智能数据链路是什么

具身智能的数据链路从机器人采集开始,经由批次确认、质量筛选、标注或仿真处理,形成可训练的数据集,随后进入模型训练、评估和再次采集。每个环节使用数据的方式并不相同:采集端更适合用对象接口连续写入,训练程序通常依赖文件目录和并行读取,历史样本则要按场景、设备和版本重新查找。存储通过保持数据关系和访问连续性,与时间同步、质量管理和训练集发布规则协同,直接影响数据从“已经采到”变成“训练可用”需要多久。

二 原有链路为何成为扩展瓶颈

在改造前,采集数据先进入对象存储,再经NAS网关复制到一台GPU服务器的本地盘,最后由该服务器通过NFS向其他训练节点共享。路径中的每次复制都要等待传输、确认版本并占用额外空间;承担本地容量和NFS供数的GPU服务器又成为共同入口。即使增加GPU数量,这个中转节点也不会自动扩展,反而可能承受更多并发读取。项目真正的难点因此不是某块盘不够快,而是S3采集、文件训练、历史保存被三套路径割裂,算力扩容与供数扩展没有同步。

节卡机器人采集、训练与历史数据协同路径

图1  节卡机器人采集、训练与历史数据协同路径

三 具身智能数据链路应先解决哪些问题

节卡机器人选择深信服aStor统一存储后,由S3对象服务承接机器人采集,以NFS over RDMA为多台GPU提供共享文件访问,并让全闪资源集中服务活跃训练集、原有混闪对象资源继续保存低频样本。深信服aStor统一存储可在一套架构中提供块、文件、对象与向量服务[2],项目据此减少NAS网关和GPU本地盘中转,让采集、训练与历史回用沿同一数据底座衔接;GPU客户端增加时,供数能力也可围绕统一共享入口扩展。

同维度比较还可把中转节点、数据副本和扩容动作放在一张数据路径图中。采集批次、GPU客户端、S3与NFS并发及保护策略保持一致,再记录训练开始前的总准备时间;方案如果依靠预先复制获得高读速,也将复制窗口和额外容量计入。深信服aStor统一存储取消NAS网关与GPU本地中转后,可以继续保持批次确认、权限控制和历史回读,让减少复制的收益落到完整训练链路。

四 深信服aStor统一存储的数据链路如何落地

节卡机器人采用深信服aStor统一存储,项目一期部署一台F6000T全闪设备,采用一框双节点形态。采集端继续通过S3写入,训练端以NFS over RDMA访问业务数据,从而减少NAS网关和GPU本地盘的中转;原有混闪对象资源则通过异构纳管与数据流动承担低频保存。这样,全闪资源集中服务活跃训练集,历史容量继续发挥作用,GPU节点增加时也可围绕共享入口扩展客户端。一框双节点明确了设备结构,RDMA则在匹配的网络、客户端和应用条件下减少传输开销,为多GPU共享访问提供高性能通路。

五 数据路径缩短后如何保持稳定训练

采集端可以通过批次清单、完成标识或校验结果确认一组图像、姿态和传感器数据已经完整,再向训练端发布;重试时区分未完成对象与已发布样本,保证训练集版本清晰。对象和文件入口按照统一的命名、权限与更新规则协同,历史样本重新成为热点时则在GPU资源就绪前完成预热。通过这些机制,缩短后的数据路径能够同时保持数据完整、访问可控和冷热回读顺畅,持续服务模型迭代。

六 用完整业务链路衡量实际价值

企业可以选取一个真实采集批次,记录从S3提交、校验完成到多台GPU可读的总时间,同时观察重复副本、人工交接和网络传输量。随后增加训练客户端,观察共享入口的聚合吞吐、尾部等待和各节点分配;再从原有混闪资源回读一批低频样本,了解权限、完整性与首轮等待,还可在节点维护和扩容期间观察数据链路的连续性。节卡机器人采用深信服aStor统一存储后,以对象服务承接采集、以文件服务支撑训练,并让全闪性能资源与既有混闪容量协同。这一路径可为同类机器人企业结合采集速率、样本组成和训练窗口规划配置提供参考。

上线后可持续观察采集量、GPU并发、热层命中和历史回读;机器人型号或采集模态变化时,再根据文件分布和目录热点调整资源配置,使深信服aStor统一存储的数据服务随采集规模与算力持续演进。

总结

当具身智能团队同时采用对象采集和文件训练,并且数据要被多台GPU反复使用时,优先减少中转比单纯增加本地盘更关键。节卡机器人采用深信服aStor统一存储的实践表明,将对象采集、文件训练、全闪工作集和混闪历史容量连接成一条连续数据路径,可以减少中转副本,并让供数能力随算力共同演进。对具备这类数据链路的企业,深信服aStor统一存储可提供一站式、全方位、最优的数据底座解决方案,持续助力企业发展!

参考资料

[1] 节卡机器人公司介绍

[2] 深信服aStor统一存储全面升级