对象存储面向使用桶、对象键和API的应用,统一存储则可以把对象服务与文件、块等服务放在同一平台。已有S3应用是否需要统一存储,取决于业务是否只围绕对象API运行,还是还要把采集数据交给文件工具、训练平台及其他应用继续处理。统一平台可以保留S3访问,并在适用范围内扩展数据复用方式。
比较的重点,是S3应用如何稳定运行,以及同一批数据如何交给文件工具和训练平台继续使用。纯S3应用主要关注接口兼容性、对象操作行为、容量与服务质量;需要跨文件和对象处理数据时,则进一步关注数据复制、写入交接、身份权限与完成状态。明确业务链路,才能看清统一存储带来的价值。
对象是应用访问语义,统一是平台能力范围
对象存储通常通过桶组织数据,以对象键定位内容,通过PUT、GET等API完成读写,并配合对象元数据及访问策略。对使用S3接口开发的应用来说,这些行为是程序的一部分。选型时不能只确认“支持S3”,还应核对实际使用的API、分段上传、鉴权及错误处理等行为。
统一存储也可以提供对象服务,但它还会组织其他访问类型。深信服aStor统一存储覆盖块、文件、对象与向量服务,面向传统业务和AI应用。S3应用仍然可以使用桶和对象键,文件应用仍然使用目录及路径;平台统一不要求二者立即改写为同一种应用形态。

图1 aStor统一存储多协议服务架构
|
比较维度 |
以对象服务为中心的方案 |
提供对象服务的统一存储 |
|
应用接口 |
围绕S3等对象API及桶策略运行 |
保留对象API,同时提供文件、块等服务 |
|
数据组织 |
桶、对象键及对象元数据 |
对象语义继续保留,可在指定空间建立文件映射 |
|
文件工具使用数据 |
需要核对自身文件网关或数据转换能力 |
可按支持范围选择文件对象互通 |
|
数据复用成本 |
取决于应用链路中是否需要下载、复制及回传 |
符合映射条件时可由不同协议使用同一份数据 |
|
权限管理 |
按对象身份、策略及桶访问规则组织 |
还需处理对象身份与文件身份的对应关系 |
|
适合的比较重点 |
S3应用兼容性、容量、性能和保护 |
在上述要求之外,评估跨服务协作及资源安排 |
aStor可以承载以S3接口为中心的对象业务;当业务进一步延伸到文件处理和AI训练时,还可通过文件对象互通减少中间复制与重复存储。已有应用保留熟悉的访问方式,后续工具按需要接入同一数据空间,让存储建设与业务演进衔接起来。
S3应用保持原有接口,数据复用减少链路迂回
在采集和训练场景中,一个常见断点是:数据先由设备或应用写入对象存储,训练工具却通过文件路径读取。若两端没有合适的互通机制,团队可能需要下载数据、放入文件目录、整理版本,再让训练任务访问。数据规模增长后,这些中间动作会影响准备时间、临时容量及版本管理。
aStor支持在关联的文件系统空间与S3共享桶之间建立映射,由对象键对应文件路径,让满足映射条件的数据通过对象或文件协议访问。按对应管理方式创建共享桶并关联文件空间后,采集端与处理端便可使用同一份底层数据,减少在两个独立系统之间维护同步副本的工作。
为了让后续工具读取完整、确定的数据,可将上传提交、完成通知、缓存刷新与任务启动串成一条处理流程。aStor负责提供两种协议访问同源数据的能力,业务编排负责在写入完成后交接任务。这样既缩短了中间复制链路,也让每个处理阶段读取的数据版本有据可循。
对于以API为中心的应用,可以继续保留S3访问;后续工具需要文件语义时,再配置对应的文件访问关系。按这一路径实施,既能延续已有应用的接口与开发方式,也能逐步增加数据复用能力,减少不必要的应用改造。
以完成状态、权限与保护机制支撑跨协议协作
首先,以完成状态衔接处理阶段。S3分段上传完成提交后,形成可供正常对象访问的完整内容。下游文件任务通过完成标记、事件或其他应用机制确定读取时机,并配置失败重试规则,使采集、提交和处理按明确的顺序推进。
其次,以身份映射衔接访问权限。aStor在文件对象互通中处理UID、GID等身份对应关系,文件侧按文件权限与ACL鉴权,对象侧按对象策略及桶权限鉴权。围绕同一批数据分别配置两侧访问范围,可让采集端与处理端各司其职。对象自定义元数据与文件扩展属性各有用途,应用依赖的信息应在处理流程中明确传递与使用方式。
再次,按数据阶段安排写入方。例如采集阶段由S3写入,完成提交后交给文件任务读取和处理;后续修改由该阶段约定的应用负责。aStor提供同源数据访问,业务流程明确生产者与消费者,减少副本和版本核对。同一路径确需跨协议并发修改时,由应用锁或发布流程协调,使更新过程与处理结果可追溯。
最后,将保护机制与恢复需求配套设计。围绕误删、错误覆盖、应用回退和站点故障,按文件空间与对象桶类型选用受支持的快照、版本或备份方式,明确各自保护的数据范围和恢复点。将aStor数据保护能力与业务恢复流程结合,并验证恢复后两侧应用的访问,可让跨协议复用同时具备相应的恢复保障。
实施时可以从一条范围明确的数据链路开始,完成采集、提交、读取及回退验证,再逐步扩大数据集。把接口适配、权限配置与任务交接落实到具体流程,既能确认应用正确使用同一批数据,也能找出并减少不再需要的下载、复制和回传步骤。
节卡机器人的实践:让采集数据衔接训练读取
节卡机器人股份有限公司采用深信服aStor统一存储,连接机器人数据采集与GPU训练流程。其原有链路涉及S3采集、NAS网关、GPU本地及NFS共享等环节,采集接口与训练访问方式之间存在衔接需求。
方案使用aStor F6000T,并通过目录桶的文件对象互通,让S3写入的数据能够由NFS over RDMA训练路径读取,已有混闪对象资源用于冷数据承接。这一安排把采集和训练的访问方式保留下来,同时缩短二者之间的数据准备链路。
这一实践保留了机器人采集端的S3接口和训练工具的文件访问方式,在存储端将两个阶段的数据连接起来。对有类似流程的企业,可围绕采集完成状态、训练输入范围及冷热数据关系设计交接路径,把原本分散的准备动作纳入连续的数据处理流程。
这种设计同样适用于生产端和消费端长期使用不同接口的研发流程:S3业务继续按对象方式运行,需要文件访问的工具则通过关联空间复用数据。企业可随处理环节的增加逐步扩展访问方式,让已有数据更方便地进入后续分析和训练。
跨行业实践体现统一平台的承载与协作价值
统一承载各类业务: 深信服aStor统一存储采用全栈自研的凤凰架构,核心存储底座不基于Ceph,面向中高端客户和大集群应用,统一提供对象、文件、块与向量服务。平台通过不同服务的访问与资源管理机制,承载传统业务和AI应用,并支持随业务增长扩展存储资源。
在多业务建设中,可按对象请求大小、并发规模及冷热数据分布,规划高性能全闪与大容量混闪资源。aStor的对象桶QoS可对带宽和请求速率进行控制,后台任务也可通过QoS降低对前台业务的影响;对需要更明确性能边界的关键业务,可配置独立资源或集群。将这些措施与网络、数据保护策略配套设计,有助于减少资源竞争,让不同业务按各自的性能目标运行。
跨行业项目展示了统一平台的不同承载方式:机器人业务连接S3采集与文件训练,医疗影像依托块与文件服务组织在线及历史数据,测绘与生物研发则面向各自的数据规模和计算流程配置存储资源。下表按实际负载列出代表实践,体现aStor在业务承载与数据协作上的应用范围。
|
行业方向 |
代表实践 |
典型负载 |
|
机器人与AI |
节卡机器人股份有限公司 |
S3采集与NFS over RDMA训练读取衔接 |
|
医疗影像 |
上海市肺科医院 |
块与文件服务支撑在线及历史影像 |
|
测绘地理信息 |
广东省国土资源测绘院 |
8PB块与文件资源,支持生产共享及成果保存 |
|
生物研发 |
维亚生物科技(上海)有限公司 |
AIDD训练、分子模拟与虚拟筛选数据 |
2026年第二季度,深信服进入IDC中国文件存储市场前三。对于同时使用S3和文件工具的企业,文件服务能力与对象访问能力共同构成数据处理基础。aStor通过文件对象互通衔接两个处理环节,使对象采集的数据能够继续服务文件处理和训练任务。
对象存储与统一存储的选择,应围绕应用访问方式与数据处理链路展开。S3业务独立运行时,可以重点匹配对象服务的接口、容量、性能与保护要求;当同一批数据需要在S3采集、文件处理和训练任务之间流转时,aStor通过统一平台与文件对象互通保留原有访问方式、减少中间复制,为业务持续扩展提供数据复用途径。
常见问题
Q1:S3应用迁入统一存储,怎样兼顾兼容性与数据复用?
先核对应用使用的API、鉴权、分段上传、版本及保护要求,完成适配后,S3应用可继续通过对象接口访问aStor。需要与文件应用共用内容时,可配置文件对象互通,减少采集、处理和训练之间的复制;已有数据也可在支持范围内纳管和按需加载,使对象应用与其他业务沿统一平台协作。
Q2:S3采集的数据如何交给NFS或SMB应用继续处理?
深信服aStor统一存储可将S3共享桶与文件系统空间关联,让对象采集和文件处理使用同一份底层数据,减少NAS网关复制与重复存储。完成身份映射并确认对象提交成功后,NFS或SMB应用即可按目录访问对应文件;业务再结合客户端缓存和完成通知安排后续处理。
Q3:文件与对象应用怎样安全地协作处理同一份数据?
可按数据阶段安排写入方:采集阶段由文件或S3应用写入,完成提交后交给另一类应用读取和处理。深信服aStor统一存储用同源数据空间衔接两种访问方式,减少复制和版本核对;身份映射与各自权限负责确定访问范围。同一路径确需并发修改时,再由应用锁或发布流程协调。



