13

IT大嘴巴 · 2023年07月04日 · 吉林

数据“野蛮生长”,青云“点石成金”

“陈工,目前的数据处理还要多久能完成?”

“呃,至少还要48小时吧”

“那现在这48小时内产生的数据呢?还要额外的48小时?”

“不,可能要更多,没准上百小时……”

“那还愣着干嘛,加服务器呀?”

“王总,机房的功耗已经到极限了……”

因为数据处理的事儿,身为公司技术负责人的陈虎最近头疼不已。虽然大家都说2023年行业不景气,但幸好早在年初公司就签约了某项智慧交通的服务大单,从3月运营至今也还算流畅。但就在最近半个月,随着计算、存储等资源的消耗,平台运维已经到了关键时刻,而智慧交通每天成千上万摄像头、传感器产生的数据还在源源不断的加入后台数据库中——一边是每时每刻都在产生的数据,一边是慢悠悠的网络和存储延时,巨大的压力让他整夜睡不着觉,头发也掉了不少。

这也是当下不少城市推行智慧交通遇到的现实问题。特别是伴随着数字化发展,如今越来越多的城市有了自己的智慧交通管理平台。在今年加快建设数字中国的背景下,更有许多城市希望以数字赋能发展,回应群众对美好生活的期待与向往。

image.png

以往,交通信号灯都采用的是既有的默认设定,无论流量情况如何、无论是否拥堵,信号灯都按照设定好的时间切换,难以实现智能化、人性化的管理,甚至还需要交警亲自到场进行指挥。而在使用智慧交通系统之后,管理人员在指挥中心的智慧大屏上就能看到城市交通的整体状况,也可以通过智慧交通管理平台对路口交通流量、流向进行24小时精准监测和分析研判,精准控制红绿灯等交通信号设备。除此之外,人脸识别、即时曝光等智慧应用也管住了行人、非机动车闯红灯等不文明行为,优化交通效率、提升了交通安全性。

然而,如何处理每天产生的海量数据就成为了最棘手的问题。虽然在当下,许多人都认为数据是“财富”,是数字化时代的“石油”,但正如原油也需要提炼等处理一样,要想让数据真正发挥价值首先就是存储,之后还要经过清洗、分析等多步骤才能加以利用。

换句话说,陈虎现在连数据存储都难以实现,万里长征还没有走出第一步,就更不要提发挥数据价值了。

当然陈虎也想过很多办法,最直接、最有效的就是租用云服务器。相比自行购买来说,租用云服务器首先解决了时间上的紧迫问题,基本能做到当天租赁当天上线,即便需要一系列的调优配置,也只是很短的时间,完全可以满足“火烧眉毛”的时间限定。但之所以还没有做出选择,则是因为陈虎还没有找到一家适合的云服务商,无论是安全、效率、价格还是其他方面。

安全是最不需要担心的问题。云计算特别是公有云服务平台发展到今天,各大品牌在可靠性、稳定性、安全性等方面都有自己的独家技术,故障率也控制在合理的范围内,根本不需要为此担心。

价格虽然很敏感,但云服务商的技术、运维、服务团队支持,以及个性化需求的响应等同样重要,更何况面对刻不容缓的数据存储难题,价格并不是陈虎重点考虑的范畴。

最核心的是效率,是数据的存储问题,说到底就是后端数据中心存储与网络的延时。如果想把智慧交通项目中大量传感器数据(如烟雾、湿度、温度等)存储到数据库中,就必须要求后端数据中心有强大的 I/O能力,能够在 I/O 密集型场景下有良好的表现。但这一圈观察下来,虽然不同品牌的优点不少,但缺点也足够突出——针对时延敏感场景,很少有云服务商能拿出切实可行的方案,尤其是针对MySQL和Redis等场景应用下,传统表现已经难以满足需求。

“老同学,忙啥呢?”突然弹出的微信消息将陈虎从思绪中拉了回来。对方正是自己大学同学,如今供职于某研究机构的张林。“听说你们在做智慧交通的外包运营,有些问题想请教下”,张林还是那直率的性格,少了职场上的客套,多了些同学之间的开门见山。

“别提了,你先别问我,我先问问你——现在这些云服务商,哪个比较靠谱?”

“这个问题还真问对人了,大大小小的云服务商我也接触不少的,但靠谱的话......”说到这里,张林卖起了关子。

“谁呢?就别卖关子了,我的老同学。”焦急万分的陈虎,听到这里眼里冒出了光。

“青云QingCloud。他们家的技术、服务在我接触过的厂商中,都很不错。”张林这时候慢慢说道,“端午节的时候,我们的服务器出现了效能问题,青云的小伙伴及时响应和精准判断,迅速调试了2个故障。这是我从业多年,遇到最好的。”

“那太好了,但我现在有一些数据存储的难题,不知道他们家能不能解决呢?”听完张林的描述,陈虎一股脑地说出了自己的境遇。

“嘿,当然可以啊,青云是国内最早一批的云服务商,研发技术业内一流,产品也很靠谱。这不最近,我听说青云又要上新了,叫新一代计算型e4云服务器,搭载了第四代英特尔®至强®可扩展处理器,性能猛增,解决你这个数据存储难题绰绰有余。要不,你试试?”

“你说的是搭载了年初发布的那个®至强®可扩展处理器平台?”

“是呀,但哥们,套一句广告语,你的能力超乎你的想象,青云e4云服务器的内存吞吐能力提升 50%,网络延时降低 35%,这不正是你要的么 ”。

其实只要是业内人,多少都听过今年年初新至强发布的消息。作为英特尔发布的第四代®至强®可扩展处理器,研发代号为Sapphire Rapids的新至强采用了Intel 7制程工艺,单颗处理器的最大核心数增加到了60个内核。和上一代产品相比,通用计算性能平均提升了53%,内置多种加速器,让性能更进一步。尤其是借助英特尔®高级矩阵扩展(英特尔® AMX)实现AI功能的显著加速,提升深度学习与训练推理性能。更重要的是这些提升也同时带来了35%的 I/O性能提升、30%的网络延迟降低和100%的网络性能提升。换句话说,相比上一代平台,新至强在 I/O与网络吞出能力上的表现更好,可以在更短时间内实现数据的存储与调用。

“你这都是理论数据吧,听起来提升了而已”,虽然张林介绍了一些新至强的优势,但在陈虎看来这些数据更多只是一种商业宣传,身为理工男的他更相信实测数据,毕竟技术再先进也要应用在实际的场景和业务当中。

“怎么?连我你都不相信了?我们实验室最近正好联合青云QingCloud进行了相关测试。就拿最常见的4C8G配置(即4核CPU、8G内存,编者注)为例,实测发现内存吞吐能力最大提升50%,随机读写性能提升340%、延迟降低210%,具体到数据库来说,Redis性能最大提升57%,MySQL性能最大提升286%……这些数据不知道陈总可还满意?”

“你小子,可别逗我,哪能有那么大的提升,你们是不是动了手脚?”坦白说,听到这些数字的时候,陈虎惊艳不已,毕竟在如今CPU性能已经被挖掘得差不多的情况下,20%就已经算是“巨大提升”了,而提升一个数量级的200%简直是是天方夜谭。所以,他不得不再跟张林确定一下数字的准确性,甚至他也怀疑是自己的耳朵听错了。

“千真万确,我有必要骗你么?”作为测试的亲历者之一,张林很理解陈虎的疑问,毕竟自己在看到这些数字的第一时间也难以置信。

其实青云e4云服务器的优势还不仅如此,除了满足大数据、数据库等场景需求,在AI推理、云原生、高性能计算等更多场景下也有着不俗表现。比如现在流行的AIGC就可以借助e4云服务器,实现AI推理,而基于e4优秀的计算性能、弹性伸缩和分布式存储等特点,帮助企业高效开发云原生应用。

“我觉得不太可能,除非让我自己试试”,陈虎的确动了心,要是有这样的表现,还说什么48小时,分分钟就能完成任务,后续的数据分析也自然是水到渠成。想到这里,他甚至想直接赶到张林的实验室去看看,“你们还在望京那个什么大厦吗?我这就过去”,陈虎已经迫不及待。

“刚微信给你了。解决完你的事儿,我还有些智慧交通的运营问题要找你呢?……喂,陈总,陈老板,你在听吗?”

“要不你下班直接过来吧,咱们见面说……对对,就是我们公司楼下的那个烤串店……老同学嘛,不用客气的……”。来不及放下电话,陈虎就拨通了总经理的号码——

“王总,关于智慧交通的项目,我有新情况跟您汇报……”

推荐阅读
关注数
1943
内容数
252
专注开放计算、大数据应用、人工智能、企业数字化转型、云计算等领域产业观察及产学研合作。
目录
极术微信服务号
关注极术微信号
实时接收点赞提醒和评论通知
安谋科技学堂公众号
关注安谋科技学堂
实时获取安谋科技及 Arm 教学资源
安谋科技招聘公众号
关注安谋科技招聘
实时获取安谋科技中国职位信息