申耀的科技观察 · 2022年06月24日

ObjectScale:重新定义下一代对象存储,戴尔科技的重构与创新

毫无疑问,随着企业数字化转型的逐步深入,今天非结构化数据也正在快速的激增,并在千行百业中广泛存在。例如,银行的票据影像、医院的PACS影像、档案馆的档案数字化文件、制造业的设计图纸以及生产质量数据等等,都是典型的非结构化数据。

根据Gartner数据显示,目前全世界80%的数据都是非结构化数据;同样,IDC也预测,截止到2023年,文件和对象数据的容量将增长3倍,且90%的新企业的应用将是基于云原生设计的,显然这就对非结构化数据的存储、使用和管理提出了全新的挑战。

在此过程中,作为全球非结构化数据和对象存储领域的市场领导者,戴尔科技集团在过去二十多年的时间里,就在对象存储领域不断的深耕和沉淀,从最早的Centera和Atmos,到ESC,再到为云原生时代而生的ObjectScale,可以说其不断地重构和创新,重新定义了下一代对象存储的发展方向和趋势。

也正因此,在Gartner公布的《2021年分布式文件系统和对象存储魔力象限》报告中,戴尔科技集团就位列榜首,再一次展现了其强大的技术实力和领先优势,而自2016年Gartner首次发布该报告以来,戴尔科技集团更是已连续六年实现了“霸榜”。

那么,目前整个对象存储领域究竟正在发生哪些演变趋势?戴尔科技最新发布的ObjectScale又有何技术优势?面向未来,戴尔科技又将如何赋能千行百业的用户,释放海量非结构化数据的新价值呢?

对象存储三大演变新趋势

我们知道,今天的数据已成为“新型生产要素”,在数字化转型的大浪潮下,一切都离不开数据,尤其是在海量非结构化数据增长成为“新常态”的情况下,如何从海量非结构化数据中真正获取到价值,这也是对象存储过去几年来异军突起、备受关注的关键原因所在。

戴尔科技集团中国研发集团上海研发中心总经理陈春曦

戴尔科技集团中国研发集团上海研发中心总经理陈春曦“感同身受”。他说:“戴尔科技早在2006年就在上海研发中心成立了对象存储研发团队,当时整个公司就意识到了对象存储在未来具有战略地位,而在过去的16年时间里,无论是整个上海研发中心,还是对象存储团队也都实现了不断的发展。到现在为止,我们已经有将近200多名研发人员,覆盖了市场、架构、研发、测试和技术支持等各个领域,同时在此过程中我们也看到整个对象存储市场也正经历着新的演变趋势。”

一是,从工作负载的角度看,对象存储的角色正在向业务主存储改变,并开始更多地承载关键业务工作负载。可以看到,在对象存储发展的早期,其往往被企业用作备份、数据归档或者内容存储,是一款“性价比极高”的所谓“二级存储”平台。

但与此同时,随着海量数据的增长,尤其是越来越多新型应用的出现,对象存储的角色也正在发生改变,那就是企业需要“更大、更快、更省”的存储平台以满足其业务和数据快速增长的需求,而对象存储正好满足了这样的市场需求,因此它也正在向业务主存储的“角色”快速改变,并开始更多地承载关键业务工作负载。

二是,从云原生应用的角度看,今天以Kubernetes为代表的云原生技术和理念正“大行其道”。根据IDC此前发布的报告,到2022年,50%的企业将部署统一的VMs、Kubernetes和多云管理流程和工具,以支持多云的管理和治理。此外,到2022年,60%的中国500强企业也将投资于云原生应用和平台的自动化、编排和开发生命周期管理,而这些变化趋势也对对象存储的发展产生了重大的影响。

“今天越来越多的新型应用都正在以云原生为基础构建,同时云原生也成为了下一代应用程序发展的核心方向,而这也深刻影响了对象存储的技术发展趋势,对戴尔科技而言,如何更好地去重新定义云的应用,或者说重新定义现代化的数据中心,让对象存储更好去适应云原生应用的发展,也是我们在设计和研发对象存储时考量的重要方向。”陈春曦说。

三是,从技术创新的角度看,今天对象存储无论是在元数据、API乃至向“边缘/核心/云”方向进化方面,同样也正在经历着新一轮的技术创新。以元数据为例,对象存储因为可以在传统数据之外标记很多的数据,或者说能够直接通过元数据定义业务标签,这样就能够帮助用户更好地检索、查询数据,尤其是在自动驾驶,以及更多的人工智能、机器学习利用元数据方面,能够帮助用户定义特定的数据集,由此对整体的应用产生巨大的效率提升,这是对象存储的独特之处,也是它巨大的优势。

除此之外,戴尔科技在对象存储方面能够支持S3协议,而大多数现代化应用和云原生应用都能够兼容S3,这就让对象存储有了更多的“用武之地”;在此基础之上,戴尔科技也正在对象存储领域展开更多的创新,让其也更加适应“边缘/核心/云”端到端覆盖的领域,由此也让对象存储在技术创新维度实现了更多的延伸。

而戴尔科技在对象存储领域持续探索与创新的“集大成者”——正是本文的主角“ObjectScale”,那么ObjectScale究竟在哪些方面实现了重构与创新呢?

重新定义下一代对象存储

据了解,ObjectScale最早出现在2020年戴尔科技与VMware的合作当中,当时在VMware容器平台Tanzu上发布了其早期预览版,它可以依托闪存构建一个性能更高的容器对象存储方案。2021年年底,ObjectScale迎来了正式发布,它是戴尔科技集团有史以来最“软”的一款软件定义存储产品,它采用了微服务架构,同时也支持Kubernetes编排,可以说在云原生时代真正重新定义下一代对象存储平台。

戴尔科技集团中国研发集团上海研发中心软件工程资深总监滕昱

戴尔科技集团中国研发集团上海研发中心软件工程资深总监滕昱表示:“ObjectScale可以把它理解为传统的ECS不仅仅首次实现了软件定义,同时也具有Kubernetes架构灵活编排和部署的能力,能够最大限度地使用物理的Resource(资源);更为重要的是它具备云原生的能力,能够根据应用的需求或者说工作负载的需求实现AutoScale(自动伸缩)的能力,这种能力是传统的软件定义所不能达到的,所以ObjectScale是我们从软件定义迈向云原生过程中非常关键的一步。”具体来看:

首先,在软件定义方面,ObjectScale原生支持Kubernetes,运维管理简单;同时还具有智能的工作负载形态以及灵活的部署选项。其中,“加持” Kubernetes之后,ObjectScale就能够通过Kubernetes存储实现编排调度、负载平衡、自修复、资源优化等能力,同时自服务的K8s API也能够让开发人员能够将对象存储集成到CI/CD管道中,由此提供可验证的、可重复的和一致的环境。另外,它还具有隔离资源和多租户的能力,最终能够以更低的TCO,实现应用程序更快地开发。

而“灵活部署”指的是,ObjectScale支持在经过验证的软件和硬件上实现部署,目前已支持包括VxRail和VMware环境和Red Hat的OpenShift Kubernetes环境。此外,ObjectScale的“灵活性”还体现在全新的产品消费模式上,如ObjectScale Community edition版本就免费提供高达30TB的使用容量,同时也可以获得永久有效的社区支持;而ObjectScale VCF with Tanzu版本和ObjectScale Red Hat OpenShift版本则提供订阅或企业许可模式,可直接运行在vSAN存储或者运行在disk/meida环境中。

其次,在企业级保障方面,ObjectScale具备强大的可扩展性,同时作为一个覆盖了从边缘到核心的存储平台,它也具备支撑客户构建“全球分布式数据湖”的能力。

“ObjectScale完全继承了ECS企业级对象存储的特性,它最大的重构就是在整个管理和调度面引入了Kubernetes,但在数据面依然是ECS过去多年沉淀和积累下来的企业级能力,包括天然的横向扩展架构支持对象存储集群的扩展;支持按需添加新节点、对象存储和容量;在自动伸缩能力方面,即使客户的数据从TB级增长到EB级,其对存储桶或对象也没有任何限制;此外,ObjectScale架构本身也支持客户在数据中心甚至在边缘构建小型的云中心等,加上它支持和兼容S3的接口,因此更多的客户也可以通过ObjectScale在公有云环境中去实现全球数据湖的构建。”滕昱说。

最后,在现代化应用方面,ObjectScale丰富的S3兼容性和可扩展性更使它成为了多种工作负载的理想整合平台,既能满足高性能和低TCO的要求,也能满足现代化应用和传统工作负载的要求。与此同时,ObjectScale还在包括事件流和日志分析、备份和存储的整合以及更多的应用场景中发挥着更大的作用。

以事件流和日志分析为例,ObjectScale由于具备无限扩展、无节点、租户或容量限制;能够实现S3兼容、内置元数据和搜索;支持多种存储介质的选择,无论是传统的HDD还是NVMe SSD;以及加上本身的操作简单,具备低TCO等特性,因此,在数据采集管道、搜索和分析以及数据可视化领域都能够起到更多的价值。

值得一提的是,在2022年的戴尔科技集团全球峰会(DTW 2022)上,戴尔科技也宣布了与Snowflake的合作,这是一家能够提供基于云的数据存储和分析服务的公司,它允许企业用户使用基于云的硬件和软件来存储和分析数据,且能够同时支持AWS、Azure 和 Google Cloud三个云平台的数据仓库服务的接入,这对于如今企业中多云、异构的复杂部署环境有着很强的适用性。

滕昱认为:“对于戴尔科技的行业客户而言,今后就可以在私有云环境中通过ECS、ObjectScale,同时借助Snowflake的合作提供一样的界面或者API,在此基础上把ECS和ObjectScale的数据复制到Snowflake的云端系统中做分析,这样的好处是行业客户既可以让重要的应用程序和公有云环境实现完全的‘隔离’,同时又能让对象存储中的数据在云端实现实时分析,而这种强强联合所打造的创新合作模式,正是当下的客户在云时代所需要的真正解决方案。”

当然,随着ObjectScale的发布,很多客户也非常关心未来如何从ECS过渡到ObjectScale?滕昱对此强调说:“确保用户数据的完整性是一家提供存储产品公司的立身之本,这方面我们也给客户做了承诺,那就是ECS会正常工作和持续运营,同时我们也会根据客户的需求,帮助客户分阶段完成升级以及交付的过程,当然客户的使用场景已经完全‘Ready’的时候,我们也可以帮助客户从ECS升级到ObjectScale,总之这是一个平滑升级和演进的过程。”

由此可见,ObjectScale不但继承了ECS发展多年所沉淀和积累下来的企业级的能力,同时通过加持“Kubernetes”,又在软件定义、灵活部署,强大的S3兼容性以及现代化应用方面实现了更多的创新,可以说在云原生时代为“下一代对象存储”的技术创新和发展方向“打了个样”。

释放非结构化数据新价值

随着ObjectScale的加入,戴尔科技集团在对象存储领域也完成了更为强大和完整的产品布局,包括ECS一体化交付方案,这是一款经过验证的一体化集成产品,具有NVMe的高性能配置以及高密度存储能力,可在AI和分析场景,以及用于备份和长期存档场景中起到坚实的作用。

ObjectScale则是全新的软件定义方案,其基于Kubernetes原生的容器化微服务架构打造,专为下一代应用和开发/测试场景设计,支持包括VMware、Red Hat以及VxRail等灵活的部署选项;而APEX Services On Dell ECS则是以“即服务”的模式为多云架构打造,它支持AWS、微软智能云Azure和谷歌云,能够帮助用户实现最小化的云环境使用成本,让用户在改变或者重构其工作负载的情况下,最大化的减少低风险和成本。

不仅如此,戴尔科技集团早在两年前还发布了PowerScale,这是一款具备横向扩展能力的分布式存储,其凭借极高的存储密度和非常高的存储利用率,能够帮助用户在大容量和高性能之间取得很好的平衡。可以说,在非结构化数据存储领域,戴尔科技集团的产品和方案阵容不仅具有“软硬兼施”的特点,同时更呈现出了“兵强马壮”景象。

戴尔科技集团大中华区非结构化数据存储事业部总经理刘志洪

对此,戴尔科技集团大中华区非结构化数据存储事业部总经理刘志洪表示:“戴尔科技集团连续6年‘霸榜’Gartner分布式文件系统和对象存储魔力象限,已经从一个侧面印证了我们在非结构化数据领域的领导者地位,而这种优势源于我们长达二十多年在这个领域的技术沉淀,以及在云原生时代所始终坚持的技术创新能力。”

一方面,从技术沉淀看,在对象存储市场,戴尔科技集团在对象存储领域的耕耘历史超过了20年,从最初Centera和Atmos,到ESC,再到为云原生时代而生的ObjectScale,尽管产品的名称有变化,但背后基于久经验证的传承与创新是没有改变的;同样,在非结构化数据存储市场,源自Isilon的PowerScale也是全世界第一款真正得到广泛应用的分布式存储,本身也具有适配性强,成熟可靠,经验证的能力。

“在分布式存储和对象存储领域,我们最大的优势,就是过去20多年积累下来的这种宝贵的资源,这种财富在业界是少有的,因为存储最大的考验就是数据不能丢,而我们通过20多年的实践和验证,证明了我们在成熟度方面的强大能力。”刘志洪说。

另一方面,从技术创新看,戴尔科技集团并没有因为历史沉淀而躺在“功劳簿”上,而是不断的坚持投入,坚持创新,由此在数字化转型或者说云原生时代真正在非结构化数据市场打造出了“伸缩自如、简捷如一”以及“任意数据、任意位置”的产品和方案,无论是ObjectScale还是PowerScale都具备这样的特性。从这个角度也可以看到,戴尔科技集团在技术创新领域,并没有走任何的“捷径”,而是“一步一个脚印”走出来的。

总的来说,二十多年来在分布式存储和对象存储领域的传承和专注,是戴尔科技集团领跑非结构化数据市场的底蕴和底气所在;而始终坚持技术的创新和迭代,又让戴尔科技集团在云原生时代,为释放海量非结构化数据新价值提供了更为充足的保证和信心,这种“独一无二”的能力,一定能够让更多的行业客户的数字化和智能化转型之路走得更加简单和从容,而这也正是戴尔科技集团在非结构化数据领域“把复杂留给自己,将简单留给客户”的真实写照。

推荐阅读
关注数
2384
内容数
381
专注产业互联网、企业数字化、渠道生态以及汽车科技的 观察和思考。
目录
极术微信服务号
关注极术微信号
实时接收点赞提醒和评论通知
安谋科技学堂公众号
关注安谋科技学堂
实时获取安谋科技及 Arm 教学资源
安谋科技招聘公众号
关注安谋科技招聘
实时获取安谋科技中国职位信息