腾讯云高性能对象存储解决方案

腾讯云通过多架构融合、多协议兼容和云上云下数据多级管理能力,将腾讯云存储超高性能、超大规模、超低成本的能力进行有机整合,提供高性能对象存储解决方案。

一、方案架构

AI 训练场景:将AI训练平台和并行存储一体机部署在本地数据中心,训练数据存储在腾讯公有云 COS 对象存储。在训练之前按需将数据缓存到本地的⾼性能并行存储系统集群中进⾏AI训练,训练结果按需保存在本地的高性能并行存储系统或云上对象存储COS中。

混合云场景:客户应用、并行存储一体机部署在本地数据中心,客户数据统一存储在腾讯公有云 COS 对象存储中。通过并行存储混合云方案,平台根据数据的使用频率自动将常用数据缓存到本地部署的并行存储集群中。客户在使用数据的时候,如果缓存命中,则直接访问本地并行存储系统中的缓存数据;如缓存未命中,则并行存储混合云平台将数据从云端拉到本地存储中提供给应用访问。

高性能计算场景:HPC集群、并行存储一体机部署在本地数据中心,数据存储在本地或腾讯公有云 COS 对象存储。若不在本地,在HPC运算之前按需将数据预取到本地的⾼性能并行存储系统集群中,然后进⾏HPC运算,结果仍然保存回本地的高性能并行存储系统集群并⾃动异步推送回腾讯云COS

统一存储场景:文件/对象存储系统、并行存储一体机部署在企业数据中心里。通过并行存储混合云方案,建立统一命名空间,实现跨企业私有云存储和腾讯公有云COS对象存储的文件/对象数据统一分层管理,通过动态智能数据缓存实现跨数据中心级跨公有云/私有云的数据访问加速。

二、方案优势

1.高性能

提供全闪存储介质,利用高速磁盘存储元数据、数据信息,实现低延迟、大吞吐的访问性能;支持高性能协议访问,深度集成HPC 应用。

2.多协议支持

支持先进的并行存储架构,支持主流存储协议及接口(HDFS协议、NFS协议、CIFS协议、POSIX接口、S3接口等),支持高IO、高并发的数据访问需求;提供全局命名空间,支持统一的数据访问入口,实现多云、多集群的管理能力。

3.分层存储

通过自动化的数据分层管理和数据迁移,使企业的数据按需、有序地流动起来,充分发挥公有云对象存储的海量、弹性、低成本和性能层存储的快速、灵活的特点,并且通过全局命名空间对数据进行统一的管理,形成了一体化的混合云存储架构。

解决方案

阿里云数字商品协作网络解决方案

2023-8-28 17:36:52

解决方案

腾讯云运维解决方案

2023-9-1 18:25:39

相关推荐