一般企业的数据存储,企业数据存储的基本知识

首页 > 上门服务 > 作者:YD1662023-11-23 21:31:35

数字时代,随着数据量爆炸式增长,存储的重要性越来越凸显,并逐渐从应用系统中剥离出来,形成了专门的存储系统。

面对愈加复杂的业务场景,企业对存储系统也提出了更多新的需求。但部分企业因公司规模、成本等因素,希望在项目运作上更加灵活,能自由地从成本与性能的角度选择合适的硬件。而且,传统存储系统建设周期较长,基建赶不上业务发展,也是诸多企业面临的难题。

在云原生、大数据和人工智能蓬勃发展的背景下,存力和算力之间的配合主要体现在弹性、扩展性、性能三个方面。其中,弹性和扩展性的需求推动着存算分离的发展,而性能则要求存算一体。存与算之间看似“若即若离”,实则又是“相辅相成”。

数据时代企业存储之道

当前,全球数字经济加速发展,数据正在成为*全球要素资源、重塑全球经济结构、改变全球竞争格局的关键力量。数据库作为存储与处理数据的关键技术,在数字经济大浪潮下,全球数据库产业中新技术、新业态、新模式不断涌现。其中,随着云计算逐步普及,以云为基础的存储技术正在成为企业业务创新的重要手段。

众所周知,云存储实际上是云计算中有关数据存储、归档、备份的一个部分,是一种创新服务。我们认为从两方面理解云存储的定义:第一,在面向用户的服务形态方面,它是一种提供按需服务的应用模式,用户可以通过网络连接云端存储资源,在云端随时随地存储数据;第二,在云存储服务构建方面,它是通过分布式、虚拟化、智能配置等技术,实现海量、可弹性扩展、低成本、低能耗地共享存储资源。

云存储具有高可靠性、高可用性、高安全性、规范化和低成本等特征。这些特征是依靠分布式接入、全局访问空间、虚拟化感知能力、数据流动能力、空间智能分配和绿色节能等技术来实现的。

从结构模型上来看,云存储主要由成千上万的网络存储设备、分布式文件系统及其他存储中间件组成。其结构共分为4层,自下往上依次是存储层、管理调度层、应用接口层和访问层。

和云计算一样,云存储的安全性问题一直备受关注,把数据交给“云”来处理,会不会造成泄露呢?

随着云计算越普及,信息安全问题越紧迫。信息安全的重点是加密和隐私保护,网络安全的关键是防范非法访问与恶意代码,云安全的核心则是共享技术的安全利用。具体来说,云安全技术大致包括数据安全、访问控制与身份认证、共享技术问题、系统安全漏洞、内部人员威胁等。由于云安全复杂、多变,云服务商应承担起更多安全责任,不断推进云计算安全生态的构建与完善。

而且我们发现,随着云计算技术不断发展,IT巨头们都不约而同拥抱云原生技术,并采用了共享存储的方式,通过“存算分离”架构,去提升数据库的整体能力。

存算分离将成为趋势

在实际应用中,大数据存储解决方案一般有存算融合和存算分离两种部署形态。存算融合以基于服务器的超融合系统为代表,它将服务器的计算、存储、网络等资源进行统一管理和调度,具有弹性的横向扩展能力;但是当实际业务对计算和存储需求不同时,该方案存在资源扩展不灵活、利用率低下等问题。

而存算分离将存储资源和计算资源拆分为独立的模块进行建设,在资源利用率、存储资源高效共享、多场景灵活部署、网存算协同等方面具有显著优势。

大数据的兴起让Hadoop变得流行,其存储系统HDFS更是一枝独秀,成为了所有计算组件的默认选择。但当数据量大,网络存在瓶颈时,Hadoop计算存储耦合,在任务调度时,会把计算任务尽量发送到数据所在的服务器上,一些如机架感知等技术也应运而生,但这并不能从根本上解决计算和存储的不平衡发展。

而随着Hadoop版本的演进中证明了存算分离已成为数据建设的必然趋势,特别是在当前越来越强调云原生的环境下,存储计算分离已经是大势所趋。所以对于用户来说,首先要坚信存算分离这个趋势,才会在实际应用中遇到问题还能坚持这个方向。

在这种趋势下,几乎所有厂商都在存算分离上布局,在华为云上,大数据客户的存储和计算是分开的,计算不够只需要扩计算,存储不够只需要扩存储,实现了计算、存储各自独立的扩缩容,从而减少故障风险,也将资源的利用率达到最优,最大限度降低企业使用成本。

而天翼云依托全栈领先的核心软硬件技术能力,以深度适配的基础硬件、智能网卡、服务器、面向Diskless架构的微存储等为底座,搭载自研CTyunOS操作系统与云原生存算分离数据库TeleDB实现了全栈领先、安全可靠的云平台。

我们可以看到,企业在很多场景中都不是孤立的存储场景,同时还需要多元化的算力。从应用场景的角度来看,客户更关注的是整体算力平台能带来什么价值,而存储又是构成算力的非常重要的一部分,甚至可以说算力的一半要靠存储,尤其是在HPC场景下。可以预见,云厂商们会更多地把核心聚焦在如何满足算力对存储的需求这个维度上,让存储更好为算力和数据赋能。

写在最后

近年来,国家出台了一系列推进数据中心发展的指导政策,无论是新型数据中心,还是东数西算、东数西存、东数西备,都给中国存储产业带来了巨大的发展良机。

如今,云计算已成为关系国计民生的重要技术,并且以各种应用形式走入寻常百姓家。可以预见,以云计算为代表的数字技术产业发展潜力巨大,将成为我国转变经济发展方式、实现数字经济高质量发展的重要着力点之一。









,

栏目热文

文档排行

本站推荐

Copyright © 2018 - 2021 www.yd166.com., All Rights Reserved.