E企研究院 · 2021年12月21日

航天联志大数据分析解决方案如何助力企业释放数据价值?

前言:目前各行业的创新业务中,数据集规模动辄达到数 TB 乃至数十PB,用户并发量远超传统业务。北京航天联志科技有限公司以下简称“航天联志”在软硬件一体化的基础上,发布了采用第三代英特尔® 至强® 可扩展处理器的大数据一体机,结合航天联志大数据分析平台,针对大数据处理的实时分析、深度挖掘和大容量数据仓库三类核心应用,为客户提供定制式和一站式解决方案。

面对海量井喷的业务数据,今天的企业都面临一些共性痛点:数据来源复杂、数据链条长、数据复杂多样。

同时,各行业的数据中心业务也随着人工智能大数据的快发展也在不断演变,随之而来出现的问题就是数据量越来越大,类型越来越多,数据结构也趋于复杂化。

为了更快、更全面、更高效地分析这些数据,企业需要构建大数据平台来存储、计算、分析来自上百个业务系统产生的不同类型数据。

航天联志大数据分析解决方案基于航天联志大数据一体机,并搭载了自研的大数据分析平台,从数据基础设施、数据中心到数据应用的所有维度,为客户提供全面的大数据解决方案。

1、大数据一体机

航天联志大数据一体机采用第三代英特尔® 至强® 可扩展处理器,在性能、吞吐量和CPU 频率方面有显著德提高。第三代英特尔® 至强® 可扩展处理器适应苛刻工作负载的灵活性能,支持8通道内存,每个处理器最多可达 40 个核心,可同时处理更多任务,其硬件和软件解决方案组合为全场景提供性能提升,大幅减少内存和数据传输频率差所带来的延迟。

在安全性上,第三代英特尔® 至强® 可扩展处理器内置安全性与安全新功能、内置的密码操作硬件加速功能可降低普遍加密对性能的影响。

在数据处理过程中,第二代英特尔® 傲腾™ 持久内存结合第三代英特尔® 至强® 可扩展处理器的八通道内存设计,能够轻松将服务器内存容量扩展到数TB,在内存中存储更多数据,让数据处理速度更快。

航天1.png
航天联志大数据分析解决方案架构图

在数据基础设施层面,方案提供了业界最强的集群能力,集群规模可横向扩展,不仅能够随着客户数据的增长和业务的扩张而不断增长,还能够保持极高的线性度,解决了传统架构在扩展范围和扩展效率方面的难题;在数据中心层面,实现了多租户数据管理与数据安全交换体系,对外开放完整的SDK及API,满足定制化要求。

在数据应用层面,集成计算单元、存储单元、交换单元、管理单元等硬件模块和数据存储、数据管理、数据分析、数据展现等功能,提供了数据开发工具、基础数据应用及业务数据应用。

航天联志大数据一体机进一步提高了航天联志大数据平台的扩展性和灵活性,具有高可靠、高性能、简单三大亮点,基于联志高性能服务器的大数据一体机在制造、能源、高科技、公共安全、金融等行业已有大规模应用。

2、航天联志大数据分析平台

航天联志基于多年在大数据领域的积累,在不改变开源技术框架的基础上,对航天联志数据分析平台内融合的多种大数据技术进行性能增强,同时对开源框架的稳定性进行了加固,支持企业级集群部署和数据容灾备份场景需求,为用户提供稳定可靠的大数据分析服务。

平台致力于帮助零大数据基础的用户,完成大数据分析的数据导入、数据存储、数据分析和分析结果可视化的全过程。该平台基于Hadoop分布式基础架构搭建,并使用基于内存的分布式大数据分析处理引擎Spark进行数据处理。

航天2.png
航天联志大数据分析平台框架图

平台提供零大数据技术基础的数据检索服务,用户在 Web 界面中使用 SQL语言即可完成查询分析、图表生成等操作,并提供了多种编程语言接口,供开发人员进行复杂逻辑的大数据分析。此外,平台还提供了全方位可视化运维界面,方便用户全面掌握大数据集群的情况,及时发现和处理大数据集群出现的各种问题。

平台以开放的架构,支持批处理、半实时处理、实时处理等业务需求。同时,对数据处理、业务开发、业务移植等方面进行全面优化,可便捷实现业务快速移植、数据快速处理。

平台在进行普通的数据分析时,只需要使用SQL语句即能实现,并能将分析结果以可视化图表的形式展现给用户,便于其加工生成相应的数据分析报表。此外,平台还提供多种语言的编程接口,供开发人员进行复杂逻辑的大数据分析,满足更高层次的大数据分析业务需求。

平台采用基于内存的 Spark 并行计算框架进行数据处理,可提供HDFS、HBase 等多种存储方式,以及 MR、分块索引等多种检索方式,其友好的 Web 操作界面,支持数据从关系型数据库、文本文件到大数据分析平台的批量导入,以及数据查询、结果可视化呈现等操作,为用户提供零大数据技术基础的数据检索服务,用户只需在 Web 界面中使用 SQL 语言即可完成查询分析、图表生成等操作。

1、专业的一体化架构:从数据基础设施、数据中心到数据应用的所有维度,提供业界最全面的大数据解决方案。

2、灵活的系统扩展性:采用横向的可扩展架构,允许用户根据需要个性化扩展集群,实现资源高效利用。

3、高性能的存储能力:与英特尔在硬件上深度合作,优化航天联志大数据一体机软件架构,为大数据的挖掘和分析提供专业稳定的IT基础平台,统一管理PB级文件系统。

4、高效的数据处理能力:拥有海量的数据资源,积累了丰富的数据深度分析和数据挖据技术,在税务、金融、公共安全领域有权威应用。

5、高可靠性和安全性:在信息安全方面有数十项专利,数据多备份容灾,处理节点分布式采用航天联志PKI安全技术保证数据传输过程中的安全,多层次身份认证和权限管理控制,多粒度数据访问权限控制。

6、友好的用户管理平台:可视化大数据管理,提供用户直观的数据处理及监督工具,自动化运维管理满足用户轻松部署集群环境,降低IT运维成本。

目前航天联志大数据分析平台解决方案已经广泛应用在制造、能源、高科技、公共安全、金融等行业中,可帮助客户针对实时流数据和离线海量数据进行复杂的建模分析,满足多元业务的数据处理场景;可面向不同业务提供定制化的数据服务,未来航天联志将以更优的系统性能、更快的部署时间为各行业的数字化创新业务奠定更坚实的数字基座。

推荐阅读
关注数
5020
内容数
334
E企实验室由E企研究院专职产品技术分析师针对数据中心、云计算、AI和5G等领域最新技术和应用研究、验证、试用、分析,数据中心级新产品新技术的市场教育,国内唯一同时研究互联网和传统企业IT基础设施的机构和部门
目录
极术微信服务号
关注极术微信号
实时接收点赞提醒和评论通知
安谋科技学堂公众号
关注安谋科技学堂
实时获取安谋科技及 Arm 教学资源
安谋科技招聘公众号
关注安谋科技招聘
实时获取安谋科技中国职位信息