13

脑极体 · 2020年04月01日

富兰克林的风筝:ReID产业化拉开的计算视觉新序幕

请大家跟我想象一下,假如你的世界里突然没有了电,会是怎样?没有了闹钟和手机,没有了灯光与网络,也没有了电脑地铁和飞机……

一切现代生活的便利,都源于1752年6月的一个雷雨天,富兰克林放飞了他的风筝,让世界“看到”了电——当时被认为是最神秘、也是最危险的力量之一。

近几年来,人们面对城市中日益增多的智慧摄像头,或多或少都会怀抱着如同“雷电”一样的警惕。无数科幻电影都告诉我们,当走在路上的自己被电脑录入,出行轨迹就有可能被随时侦查到……

显然,这并不是因为人工智能(人脸识别)技术太强大,而是因为它还不够强大,至少在大众应用层面是如此。举个例子,想要在精准识别与个人隐私之间达到平衡,行人重识别(Person Re-identification,简称ReID)就是一个非常有用的计算视觉技术。
图片1.png

因为它能够通过质量并不高的人脸图片,快速检索出不同摄像头下的同一个目标任务。

这会带来什么改变呢?

首先,人的脸和指纹一样独特,而ReID技术无需依赖高精度的人脸图像,也就避免了人们在公共场合被采集个人信息的忧虑;同时,ReID分辨率够高,在一些人脸识别无效的情况下,可以起到替代作用。

因此,ReID也成为计算视觉科技企业们攻关的对象。最近,依图科技在ReID领域取得突破,刷新全球工业界三大权威数据集当前最优成绩(SOTA),算法性能达到业界迄今最高标准。

这一标准意味着什么,能否成为ReID产业化的关键契机?

产业新动力:ReID的价值与门槛

本杰明·富兰克林和他的风筝实验,代表了人类迈出了现代文明旅程的第一步。在那之前,没人能想象有电的生活;而今天,数十亿人已经无法想象没有电的生活了。

时代的需求和社会风俗的推动(很多时候是阻挠),总会有人为技术的进程助力。ReID即是如此。

相信大部分人都不会否认,人脸识别/计算视觉在城市中的应用,正在给生活带来越来越多的便利。

比如通过智能摄像头来识别车流、车牌,实现高效率、低成本的安防;在火车站、机场等公共场所部署AI,实现犯罪分子的侦查和捕获;帮助无人购物超市和商店提高用户体验;

再比如大家最熟悉的手机相册,想要让系统在不侵犯隐私的情况下实现照片聚类,ReID都是不可或缺的技术。

2018年,特朗普政府决定在美国南部墨西哥边境追查非法入境者时,大众就担心ICE和其他移民机关可能会把人脸识别应用,从而导致错误辨识某个人并使其被错误拘留?因为在当时,人脸识别对于有色人群或女性的识别错误率依然很高。
图片2.png

既然ReID技术能够让智能生活变得更精准有序,那为什么久攻不下呢?这恐怕要从三个技术难点说起。

1.数据缺失。

我们知道,当前大多数摄像头的成像质量、分辨率、环境变化等差异都很大。在交通运输、工业制造和城市规划等实际场景下,99%的图像都是不含人脸或人脸部分是极其模糊的,仅有几个像素大小,这也导致在许多任务中,人脸识别算法经常失效,需要ReID顶上。

而一个高精准的ReID模型,要识别同一个人在多个摄像头下的画面,意味着其训练需要足够庞大、且具备连续性的行为数据。但与其他计算视觉任务相比,ReID领域的公开数据集所含的ID数量比较小,不同摄像头的数据中同一个人的外观也可能发生巨大变化,这些都给算法分析造成了阻碍,需要在算法设计上做很多创新与研发。

图片3.png

2.计算压力。

如前所述,ReID往往被部署到规模人群的行为轨迹分析上,这意味着系统需要处理的数据规模成倍增长。即使是采取1:N级(单一特征对比多种特征)的人脸识别,用来失踪人口搜索等。加上角度、光线等复杂性,特征提取、对比、判断都需要庞大的算力来支撑。

但现有的智能摄像机在本地终端无法部署足够大的算力,往往会选择将数据上传到云端,再进行识别和处理,不仅会造成一定的时延,延误众多关键任务;也有可能导致城市大脑“数据拥塞”,延宕整个系统的效率。

3.成本限制。

那么,为什么不考虑为摄像头等边缘终端加上芯片呢?答案就是贵。高通量计算芯片往往意味着更高的性能和稳定性,制程上自然也要求更小的纳米数,而ReID需要在泛工业场景中部署,如果为城市或工厂中的每个摄像头都加载这样高算力的ReID芯片,无疑是一笔巨大的开支,这也限制了ReID算法在大规模商业化场景中的落地。

显然,想要让ReID从一种技术远景完全照进现实,其所面对的困难和障碍并不小。这也是为什么,我们一直关注着致力于用ReID改善体验的公司。

用电子编织现实:依图这样改变ReID

如果说富兰克林的风筝让人类开始与电建立了联系。那么,电力真正开始产生规模经济,是从乔治·威斯汀豪斯(George Westinghouse)开始。他以交流电系统击败了爱迪生的直流电系统,从而让发电厂与远距离的用户连接在一起。

而依图在ReID中的表现,正如这场世纪对垒一样,对ReID的现实落地起到了关键作用。

为什么这么说呢?

首先,依图升级了ReID算法的开发流程。通过结合AutoML等前沿技术,依图创新性地实现了模型参数的自动搜索与迭代,改变了算法依赖研究员手工设计与调优的传统开发流程。不仅降低了模型的训练成本,也让算法的泛化性更强。

其次,进一步提升了ReID算法的识别性能。依图自研算法在业界最具影响力的三大ReID数据集Market1501、DukeMTMC-ReID、CUHK03上,将两大关键指标“首位命中率”(Rank-1 Accuracy),以及“平均精度均值”(Mean Average Precision,mAP)6项数据全部提升,达到了更高的mAP,目前达到了工业界第一,从而进一步稳固了中国AI在该任务上的领跑地位。

图片4.png

此外,ReID算法的实用潜力持续进阶。在实战应用中,依图还依托自研的AI芯片QuestCore(求索), 在仅凭穿着、步态特征的条件下,将ReID做到2017年——2018年人脸识别的精度。当时,机场、火车站等公共场合已经开始大规模使用人脸识别进行安防保障了。这意味着,ReID也有望被以低成本的解决方案,尽快进入现实场景之中,让人们无惧且享受计算视觉带来的顺畅体验。

目前看来,依图的创新将带给ReID算法更好的成本比,以及更丝滑的应用体验,平衡了理想技术与现实困境之间的关系。

挑战与机遇:ReID的未来路径

必须承认的是,要让城市换一种“眼睛”看行人,并不是一件容易的事。

一方面,各个城市摄像头体系的建设标准、密度,以及进度都各不相同,要让它们共同点亮ReID的“技能树”,实现全面替换,还有许多与技术成熟度无关的挑战;

还要面对复杂实景的挑战。即使ReID算法的首位命中率足够高,只意味着算法能够在特定的几个场景数据集下准确找出最容易识别或者匹配的那张。但现实中的场景远比这有限的几个数据复杂的多,数据模糊、建筑物遮挡、天气的改变等等,都会影响模型的实际表现。所以现在认为ReID模型能够应付真实任务,还为时过早。

这也是为什么,尽管依图科技刷榜SOTA,算法性能达到了业界目前的最高标准,但依图的研发人员耿直地说,学术界的这三个数据集不能远远不代表工业界的最好水平,更精彩的表现还要放眼于实战之中。

因为比赛中所采用的数据集,早已限定好了规模和分布,属于“应试作业”;而在依图实际落地的ReID项目中,还会遭遇更加复杂的数据、环境、参数,是“奥数级别”的挑战难度。

图片5.png

另外必须正视的一点是,要让终端摄像头完成高通量的实时计算,仅仅依靠研发端的突破还远远不够,城市环境中是否具有足够的边缘计算节点,是否有边缘计算数据中心提供澎湃的算力支持,这些都需要整个产业链乃至城市决策者的共同合作。

由此不难发现,在抵达ReID产业化的旅程中,科技企业起到了怎样的作用呢?

以依图为例,一方面,通过将自身科研优势与新兴算法相结合,加快AI算法的落地。

比如依图就将自身在芯片研发上的硬件能力,与通用化算法相结合,实现了软硬件协同开发,不仅取得了刷榜的好成绩,更关键的是激活了ReID与芯片端的融合可能,让更多的算力需求被释放,从而带动芯片产业乃至整个社会智能的进程。

正如人脸识别逐渐渗透到社会的各个角落,ReID算法也将成为智能生活不可或缺的一部分。借助AI芯片QuestCore™(求索)和ReID模型应用,依图将催化出多大的商业富矿,构筑基于ReID的新产业链。

图片6.png

1752年,富兰克林爬上屋顶放飞一只风筝的时候,可能并没有想到,他将改变整个世界的科技认知与生产基础设施。

而ReID对城市计算视觉应用的迭代,也将为人类带来新的视角与光辉,并在不远的未来成为与我们生活休戚相关的一部分。

庙堂之高,与江湖之远的叠加,就是依图乃至整个AI产业所扎根的广袤土壤。

推荐阅读
关注数
6286
内容数
1403
写让你脑洞大开且能看懂的人工智能、流媒体、海外科技
目录
极术微信服务号
关注极术微信号
实时接收点赞提醒和评论通知
安谋科技学堂公众号
关注安谋科技学堂
实时获取安谋科技及 Arm 教学资源
安谋科技招聘公众号
关注安谋科技招聘
实时获取安谋科技中国职位信息