搜索
当前所在位置: 主页 > 地方招聘 >

华为分布式存储来势凶猛IPFS还有机会吗?

发布时间:2021-08-29 17:35 作者:招聘 点击: 【 字体:

什么是分布式存储?

华为分布式存储来势凶猛IPFS还有机会吗?

分布式存储简单的来说,就是将数据分散存储到多个存储服务器上,并将这些分散的存储资源构成一个虚拟的存储设备,实际上数据分散的存储在企业的各个角落。

比如:假如你要存储10PB的一个视频文件,自己一个人的电脑存储不了,需要存储在多个服务器上,每一个服务器就是一个datanode,当你需要获取文件时,逐一访问效率太低,可以找一个中间人来存放文件在哪台服务器的信息,通过信息可以快速的找到文件。这个中间人就是namenode,存储的有关文件的信息就是元数据。为了数据安全,每一个小的视频(存储单元)复制一份存放到不同服务器上,当有服务器停止运行时,可以通过访问备份来寻找到自己想要的数据,这种存储方式叫做分布式存储。

分布式存储架构由三个部分组成:客户端、元数据服务器和数据服务器。

客户端负责发送读写请求,缓存文件元数据和文件数据。

元数据服务器负责管理元数据和处理客户端的请求,是整个系统的核心组件。

数据服务器负责存放文件数据,保证数据的可用性和完整性。该架构的好处是性能和容量能够同时拓展,系统规模具有很强的伸缩性。

IPFS全称是Inter Planetary File System,直接翻译的话叫做“星际文件系统”,它由Protocol Lab提出,是一种点对点(P2P)的分布式文件系统。不过虽然说它是文件系统,是一种用来存储数据的技术,但更确切的说IPFS是一种传输协议。

日前,在2019年世界移动大会(MWC)上,华为发布新一代数据中心级融合分布式存储FusionStorage 8.0。

华为IT产品线智能存储与数据管理领域总裁孟广斌发布FusionStorage 8.0

面向纷繁复杂的云环境,华为FusionStorage 8.0实现了一套存储系统同时支持块、文件、对象、HDFS、数据库协议,适用于全业务场景混合负载,以一套设备支持数据的生产、灾备、分析、归档等全生命周期场景,满足云上云下数据流动并保障一致性体验。

据悉,华为FusionStorage 8.0是业界首个支持企业关键业务的分布式存储系统。单集群横向扩展达到4096个节点,支持千万级IOPS,借助华为企业级存储成熟的芯片和FlashLink加速技术,节点与SSD盘之间协同更高效,时延响应低至0.5毫秒。

同时,基于华为企业存储产品久经验证的HyperMetro双活方案,华为FusionStorage 8.0可提供99.9999%的方案级可靠性,适用于虚拟化及数据库等多应用场景,保障关键业务不中断,提供支持秒级RPO(恢复点目标)的异步复制技术。凭借独有的自适应重复数据删除与数据压缩能力,即使在VDI(桌面虚拟化)应用场景中也能达到5:1的数据缩减比。

此外,华为FusionStorage 8.0通过协议融合、关键业务融合、场景融合、多云融合、管理融合五大创下融合特征,华为FusionStorage 8.0可帮助用户实现"一个数据中心一套存储"的终极目标。

作为华为FusionStorage的用户,中国移动通信集团辽宁有限公司累计部署容量超过10PB,到目前已稳定运行超过4年,数据库系统性能大幅提升,100TB经营分析数据处理时长由之前的超过10小时缩短至2小时,保障业务7x24小时在线。

华为IT产品线智能存储与数据管理领域总裁孟广斌表示:"在数据中心从传统孤岛向云架构演进的趋势下,华为全新一代分布式存储FusionStorage 8.0通过创新的五大融合,打通企业数据壁垒,在业界首个支持关键业务,真正实现一个数据中心一套存储,助力行业客户数字化转型。华为FusionStorage已经为全球数千家企业用户持续提供数据存储服务"。

伴随5G、IoT、云、人工智能等新兴技术快速发展,传统集中式存储烟囱式部署的扩展性和管理难题日益凸显,越来越多的用户期望有一种新的形式,可以打破不同类型存储间的数据孤岛,让各类业务以统一的方式进行存储和管理,同时降低TCO、提升数字化平台服务效率。

中心化的网络就像一座城堡,而华为是里面的改革家。IPFS这样的新兴技术,就像是外来的革新者。城堡只能从内部攻破还是从外部摧毁?又或都会有之?

分布式存储领域,华为的FusionStorage正以“智能”来重新定义。面向全球客户,让企业真正实现一个数据中心一套存储,释放更大数据潜能。而依托于底层协议和区块链技术的IPFS Filecoin网络,在功能上都还有开发完善和技术改进的空间,暂时无法满足大规模商用的需求。Filecoin主网上线,开发者将会将它定义为面向企业的商业存储(就像Storj一样)还是面向用户的C端市场,做一个去中心化的“百度网盘”?又或者Filecoin网络上线后又沦为炒币人士的下一盘菜肴?将怎样发展,只有后面才能验证。

尽管如此,Filecoin和传统的集中式存储不同。Filecoin是去中心化、加密、分布式,数据的所有权在用户手中。在笔者看来,这是最优秀的特质,也是新一代互联网所需要的基因。

阅读全文
返回顶部