【观察】ECS：再掀对象存储新革命，释放海量数据新价值

对象存储的新一轮变革，已经到来！...





申耀的科技观察

读懂科技，赢取未来！

在金融科技的浪潮下，券商作为整个金融行业价值链的核心环节，转型与变革已成为大势所趋。特别是过去几年随着券商业务领域不断拓展，非结构化数据也迎来了爆发式增长，这些数据在为券商发展提供强大驱动力的同时，也给数据的长期存储管理与使用带来了更大的挑战。

以某劵商的互联网业务为例，通常来说，互联网业务通常会采取多数据中心多活架构，这样可以充分保障服务高可用。诸如开户录音、录像数据需要长期保留并拒绝篡改，在数据的保留期内能快速调阅备查等特点，这就要求业务系统的底层存储的架构要灵活，功能要丰富、访问便捷和存储成本低。为此，在经过多方面的考察和测试比较以后，该券商选择了戴尔易安信ECS对象存储为基础，搭建了基于标准S3协议的非结构化数据存储平台，不仅实现了三地三中心的异步复制容灾架构，用于海量非结构化数据增长的长久保存，同时更为未来的多活互联网应用的数据调用搭建基础存储平台。

事实上，该券商基于戴尔易安信ECS对象存储技术实现海量非结构化数据的管理实践，正是行业客户高度认可戴尔科技集团在对象存储领域实力的重要“缩影”。

在Gartner近期公布的《2020年分布式文件系统和对象存储魔力象限》报告中，戴尔科技集团就位列榜首，再一次展现了其强大的技术实力和领先优势。而自2016年Gartner首次发布该报告以来，戴尔科技集团已连续五年实现了“霸榜”。

值得一提的是，近期戴尔易安信ECS也迎来全新的版本更新，新推出的ECS3.6可为企业级客户提供高度灵活的整体解决方案，使用体验超越公有云服务，能够轻松捕获、存储、保护和管理海量非结构化数据，并针对云原生应用、大数据分析、数据资产归档等场景进行了优化。

不仅如此，ECS还增加配备了NVMe SSD的ECS EXF900一体机，能够为企业的现代工作负载（例如AI、机器学习、物联网和实时分析应用程序）大幅提升性能，可以说在对象存储市场再次掀起一场“新变革”。

毫无疑问，在这背后正是戴尔科技集团一直以来在存储领域“与时俱进”积极响应用户需求的最新举措，也是其跟随时代不断进化和迭代的具体体现，相信这种持续的前瞻力、创新力和产品力，将为戴尔科技集团在对象存储市场实现“长跑”乃至“领跑”起到更加至关重要的作用，也将会为释放海量数据更大潜能发挥出更为关键的价值。众所周知，传统企业存储都有一个共同的特征，即只能垂直扩展，它在管理、成本、容量和性能方面满足不了海量和非结构化数据的存储需求。为了满足非结构化数据的存储需求，整个企业级存储市场从“垂直扩展”向“横向扩展”转变，形成了新一代企业级存储，包括块存储、文件存储和对象存储。

其中，对象存储作为一种新型网络存储架构，采用了“对象”数据组织，其综合了NAS和SAN的优点，同时具有SAN的高速直接访问和NAS的数据共享等优势，提供了高可靠性、跨平台性以及安全的数据共享的存储体系结构。从技术角度看，最适合存储非结构化数据，即图片、视频等类型数据的是分布式文件存储和对象存储。但在大量文件的并发性能方面，对象存储比文件存储要强的多，同时在系统中存入大量文件后的性能稳定性方面，对象存储的表现也比文件存储要强的多。因此，对象存储的广泛采用，也会为企业未来一步步搭建数据湖打下基础。

而从应用场景看，以5G、大数据、人工智能为代表的新兴技术越来越深入行业应用，数据在“端、边、云”延伸，数据的种类和数量越来越多，而对象存储面对海量数据场景具备天然优势，过去几年被互联网和云公司广泛采用，逐渐也就成为了存储市场中的“后起之秀”。

对此，戴尔科技集团中国区非结构化数据解决方案部系统工程师白光茁感同身受。他说：“对象存储过去一般被应用于归档的场景，但过去几年我们能够明显的看到，对象存储正在往在线存储，甚至是一线存储的角度去转变，因此它对于客户应用系统支撑的重要性，也是在不断地往前提升。”

事实上，作为对象存储领域的资深玩家，戴尔科技集团在对象存储领域的耕耘历史超过了20年，旗下的戴尔易安信第一代对象存储是Centera，Centera主要针对数据归档和法规遵从场景进行设计，并广泛应用于金融行业，是针对特定场景专用存储设备。

2008年，戴尔易安信推出第二代对象存储Atmos，从第二代对象存储开始，对象存储设备以平台的定位进入到数据中心，同时由于跨地域数据复制，跨地域数据访问特性的引入，对象存储的云特性得以体现，因此从第二代对象存储开始，对象存储也被称为云存储平台。时间进入到2014年，戴尔易安信又推出第三代对象存储ECS，这是全球第一款直接支持Hadoop大数据分析平台的对象存储产品，同时通过直接提供HDFS接口以及跨HDFS和S3接口的数据互联互通，使得对象存储成为整个数据中心的数据湖平台，支持海量数据的存储、保护、访问和分析。

但也要看到，尽管对象存储作为存储基础设施领域最具发展前景的全新市场，但随着数字化转型的不断加速，行业新应用爆发式增长，从数千、数万跃升到百万量级，数据呈现出海量、多元、实时、多云等趋势，这也对对象存储提出了全新的挑战。从这个角度来说，对象存储本身的技术发展也到了一个关键的重构期。基于此，戴尔科技集团旗下的戴尔易安信发布了全新的ECS3.6版本，并推出基于NVMe的全闪存新款设备EXF900，为包括AI、机器学习、IoT和实时分析等全新工作负载提供了有力的支持，更为ECS产品线的未来创新奠定坚实的基础，全新的ECS具备以下三个方面领先优势，具体而言：

一是，无限规模的扩展能力，能够帮助用户降低总体拥有成本。

ECS采用横向扩展、地理分布式体系结构，无论客户的数据中心位于何处，都可以轻松跟上指数级数据增长的步伐，更只需以类似于公有云的规模添加新节点和支持工作负载，就能同时实现私有云基础架构的可靠性和控制。

更为关键的是，ECS的企业规模、性能和多功能性带来了更大的成本节约。数据显示，与先进的公有云提供商相比，通过ECS构建一个对象存储云，总拥有成本可降低59.5%。此外，借助ECS，企业可以解决许多公有云面对的难题，包括数据迁移成本、延迟、数据访问模式的不可预测性、云供应商依赖、安全和法规遵从性等问题。

同时ECS在企业存储基础设施中，还能够扮演多种“角色“，包括使用ECS的多站点联合功能，企业可以创建可全局访问的内容存储库；同时它还能充当二级存储，为关键业务应用释放昂贵的主存储资源，同时与传统的磁带归档相比，ECS还可保持长期数据存储的随时可用；这样，企业就能以较低投入管理数十亿个对象和PB级的数据。

二是，用兼容S3的高性能存储支持现代化工作负载。

全新推出的基于NVMe的全闪存新款设备EXF900，还率先将S3接口的简易性与基于NVMe的SSD设备的超快性能存储系统相结合，为包括Spark、TensorFlow、Presto等读取密集型应用程序提供了理想的数据存储平台。据介绍，目前ECS EX系列一体机包括四款独特的硬件产品，即EX300、EX500、EX3000和全闪存EXF900。其中，EX300是入门版产品，它以容量60TB起的群集选项降低了采用对象存储的门槛；EX500实现了经济性与密度的出色结合，为ECS一体机产品组合注入了更高的灵活性；EX3000则是一种采用可热插磁盘的高密度对象存储系统，每个机架的最高容量可达到11.5PB，并可轻松扩展到EB规模；而作为EX系列的最新产品，EXF900通过全闪存的加持，为下一代工作负载提供了理想的选择，其容量可从每机架230TB开始进行扩展。

不仅如此，利用ECS对S3、NFS、HDFS等的多协议支持和良好的互操作性，企业也可以更好的构建现代数据湖；此外，ECS还将效率、耐用性、性能和可扩展性实现了完美结合，企业无论是需要高性能存储来分析机器数据，还是需要高效、经济的冷存储，ECS都可以助一臂之力。同时，ECS也是非常适合流数据引擎(例如戴尔易安信流数据平台)的持久数据存储。

三是，经过企业级的验证，能够更好的支持企业的数字化转型。

戴尔科技集团拥有丰富的对象存储设计经验，同时ECS具有非常高的稳定性，广泛应用于银行、证券、保险等金融行业的重要系统，具有成熟的超大规模的案例。因此，经过最佳实践沉淀和打磨出来的ECS可以帮助客户更好的采用对象存储平台，实现对海量数据的高效管理。在此基础上，ECS还具备原生保护功能(、擦除代码、高度一致性、容错、等)，确保所有数据中心区域的数据始终安全且可恢复。同时，ECS也加入了戴尔科技集团推出的“未来无忧存储保障计划”，也能够进一步护航企业的数字化转型。

不难看出，全新的ECS作为业界领先的对象存储平台，不仅能同时支持传统工作负载和下一代工作负载，更能以纯软件模式部署，也可以通过一体机这种“交钥匙”的方式部署，拥有更好的可扩展性、性能、弹性和经济性，真正满足了企业现代化应用的需求。更为重要的是，作为与S3兼容的，可全局扩展的对象存储，ECS也能通过安全可控的私有云基础架构来实现公共云的功能。

此外，使用ECS还能够以更低的总体拥有成本开发现代化的应用程序，构建EB规模的归档系统，可以说真正在对象存储市场掀起了一场“焕新”变革。客观的说，数据长久以来都作为企业的资产被保存，但由于缺乏有效的数据处理机制，这些大量的数据，分散于各处，难以联通，难以汇聚，发挥不出更好的价值，而随着对象存储被广泛的应用，目前越来越多的行业和客户也开始通过对象存储实现了数据价值的释放。

正如文章开篇所提到的，随着银行、券商等金融行业的数字化业务的持续开展、监管机构的监管要求不断的增加，各应用系统产生的各种影像、音频、视频、文档文件等非结构化数据呈现“爆炸性”增长的态势，传统金融企业在面对千万、亿级数量，PB级容量的海量非结构化数据的存储和管理时已经日益凸显出性能瓶颈。

以银行的“影像平台”（也称影像处理平台、影像管理平台）为例，它构建了银行非结构化数据的管理平台，具有综合存储管理银行海量非结构化数据的能力，完成从内容采集、创建、传递到内容分析等内容整个生命周期的完全整合。但当前的影像系统采用文件系统作为存储方式，而文件系统目录式的管理方式，在扩展性、多站点访问和管理的便利性、以及多站点的可靠性存在诸多不便。

而采用ECS对象存储提供的超大规模的存储架构，就能解决传统文件系统存储所面临的种种问题，可以更好保障银行内非结构化影像数据的安全，从而更好的为业务部门提供保障。在白光茁看来，过去几年，银行影像平台越来越多的采用了对象存储，而现在很多医院、或者媒体行业的归档或者备份的场景也都在采用对象存储平台，可以说对象存储在很多行业领域都在起到更加关键的作用。

因此，他也建议未来企业在存储基础设施选型时，一定要尽快引入对象存储的技术，而戴尔科技集团一方面会加大对象存储技术的持续创新，同时会通过国内的ECS研发团队为客户提供更多的支持；另一方面，戴尔科集团也会积极拓展国内市场的对象存储新生态，以更好的推动企业采用对象存储平台。

总的来说，过去多年对存储技术创新的专注，是戴尔科技集团领跑对象存储市场的底气和底蕴，而通过技术创新的迭代和升级，进一步推动对象存储的落地，则凸显了戴尔科技集团赋能企业加速数字化转型，释放海量数据新价值的决心和信心，相信随着ECS更大规模的采用，戴尔科技集团将会引领整个对象存储市场未来发展的新方向和新趋势，并在中国未来“新基建”的建设过程中发挥更加重要的作用和价值。

申耀的科技观察，由科技与汽车跨界自媒体人申斯基创办，18年企业级媒体工作经验，专注产业互联网、企业数字化、渠道生态以及汽车科技内容的观察和思考。
点击“阅读原文”，即刻注册参会！

    关注 申耀的科技观察