非结构化数据正以前所未有的速度增长。IDC 的预测表明,到 2025 年,全球将有 80% 的数据是非结构化的。 尽管非结构化数据并不是什么新鲜事,但IT团队承受着巨大压力,他们希望以简单和易于使用的方式快速、一致地存储和管理非结构化数据。
文件协议是存取非结构化数据最普遍的使用方式,但传统文件系统有很多的限制:
数字化转型下的软件定义存储架构,可以很好的满足用户各种需求,如在标准服务器上的敏捷部署,可灵活扩展, 性能和容量随服务器节点数增长而线性增长,硬件升级与更换无需跨存储系统迁移数据,硬件升级换代红利即时享用, 业务层无感知、无影响等。但是软件定义,也需要充分利用最新的硬件技术,与时俱进。现在,CPU 的核数越来越高, 闪存技术也飞速发展,SSD 盘容量越用越大、性能越来越高、成本越来越便宜。分布式文件存储,最复杂的就是元数据的保存和处理。 根据统计,大部分的文件分析应用,90% 的 I/O 都是元数据请求。上一代的分布式文件系统,由于当时的硬件限制, 为了解决元数据的问题,经常需要在性能和容量方面做出妥协。
XGFS(XSKY Global File System)是 XSKY 星辰天合提供的新一代分布式文件存储系统。XGFS 基于灵活的 SDS 架构, 可提供 POSIX、NFS、SMB/CIFS、FTP 等丰富的文件服务,不仅可以用于企业的文件共享,备份归档通用场景, 也可以应用于视频监控、媒资管理、高性能计算等高性能、大带宽、大容量的场景。
XGFS 创新利用最新的多核 CPU、大容量和高性能 NVMe SSD 和 RDMA 技术,只需要三个全闪存元数据高可用节点 (可以共用数据节点),就可以高效保存和处理 100 亿文件规模的数据,具有极高的性价比。
而 XGFS 的数据节点,则充分利用 XSKY 星辰天合久经市场考验的可靠自主分布式存储集群,成熟稳定,可以轻松扩展到上千个节点。
全局命名空间,使用简单。支持文件共享、网盘、FTP等办公场景。
横向扩展,滚动升级,数据永久保存。
兼容 HDFS, 高效文件元数据处理机制,灵活应对 AI/ML 数据分析要求。
支持 CSI 接口,支持多个 PODs 共享数据。
利用 X3DS(XSKY 立体数据管理系统)和 ODPF(开放数据保护框架),可以作为大容量的共享灾备资源池。
支持 Hadoop 存算分离部署,接口协议丰富,可以扩展到上千节点。