旷视研究院 · 2022年12月05日 · 北京市

AAAI 2023| 旷视研究院入选论文亮点解读

近日,国际人工智能顶级会议 AAAI 2023 (Association for the Advancement of Artificial Intelligence)公布了录用结果。本届会议共收到来自全球的 8777 篇论文投稿,其中 1721 篇论文被录用,论文录用率为 19.6%。

AAAI 是由国际人工智能促进协会主办的年会,是人工智能领域中历史最悠久、涵盖内容最广泛的国际顶级学术会议之一,也是中国计算机学会(CCF)推荐的 A 类国际学术会议。本届会议旷视研究院被收录的论文涵盖 3D 重建、多目标跟踪、视觉语言多模态、3D 检测、图像对齐等方向,下面是入选论文概览:

01

Semi-supervised Deep Large-baseline Homography Estimation with Progressive Equivalence Constraint

基于渐进式等价约束的半监督深度大基线单应性矩阵估计

在大基线(large-baseline)场景中,由于图像间的重合度低以及相对运动大使得单应性矩阵很难直接估计。为此,我们提出一种渐进式的估计策略,将 large-baseline 单应性矩阵转换为多个中间项,将中间项累积相乘就可以重建初始单应性矩阵。我们引入了一种半监督的单应性一致损失,包括用于优化中间项单应性矩阵的有监督项和基于累积重构在不使用光度损失的情况下优化 large-baseline 单应性矩阵的无监督项。同时,我们提出了一个大规模的数据集,涵盖了常规和挑战性场景。

image.png

所属领域:图像对齐/配准

关键词:半监督、大基线单应性矩阵、图像对齐

02

One is All: Bridging the Gap Between Neural Radiance Fields Architectures with Progressive Volume Distillation

一即一切:通过渐进式体蒸馏弥合神经辐射场架构间的差距

神经辐射场 NeRF可以高质量地重建三维场景,目前多种方法都在争夺其核心结构,包括MLP(NeRF)、张量(Plenoxels)、低秩张量(tensoRF)和哈希表(INGP)等。这些表示都有一定的适应场景,比如基于 hash 的 INGP 模型小、训练快,但由于分辨率混叠等原因,其不如基于张量的 Plenoxels 更易实现对场景的空间编辑。为了弥补 NeRF 系列架构间差异,本文提出了渐进式体蒸馏(PVD)实现对上述不同架构间的任意转换。通过 PVD 得到一个 NeRF 模型通常要比从头训练更快,且在部分数据集上质量更高。

论文链接:

https://arxiv.org/abs/2211.15977

开源链接:

https://github.com/megvii-research/AAAI2023-PVD

image.png

所属领域:3D重建

关键词:__神经辐射场、蒸馏、NeRF、INGP、Plenoxels、tensoRF

03

Generalizing Multiple Object Tracking to Unseen Domains by Introducing Natural Language Representation

利用自然语言表征提升多目标跟踪跨域跟踪性能

本文首先指出当前的多目标跟踪任务多在同一类场景下进行评测,即训练集和测试集取自同一场景(比如MOT17,MOT20),现有的 SOTA 跟踪器在不进行 fine-tune 的前提下直接应用在新场景跟踪性能会大幅下降,为此本文首次提出利用自然语言的高层次语义信息解决跨域跟踪问题,首次将视觉语言预训练模型 CLIP 并将其与 query-basedtracker 结合,基于此搭建的新的多目标跟踪模型 LTrack 可在域内和跨域场景上均实现优异的跟踪性能,为今后利用语言信息与视觉信息结合解决跟踪问题提供一个新的思路。

image.png

所属领域:多目标跟踪,视觉语言多模态

关键词:多目标跟踪、视觉语言模型、跨域

04

BEVStereo: Enhancing Depth Estimation in Multi-view 3D Object Detection with Temporal Stereo

BEVStereo:利用时序立体提升环视 3D 检测中的深度估计准确度

现有的在 3D 检测中利用立体视觉提升深度估计的方法大多无法解决两个问题:过多的显存开销以及无法解决运动物体。BEVStereo 通过引入动态立体视觉的方法解决了这个问题,并且提出了可以感知物体尺寸的 circle NMS, 能够避免计算 rotated IoU 的同时将 box 尺寸考虑进去。

论文链接:

https://arxiv.org/abs/2209.10248

开源链接:

https://github.com/Megvii-BaseDetection/BEVStereo

图片

所属领域:3D 检测

关键词:动态立体视觉

05

BEVDepth: Acquisition of Reliable Depth for Multi-view 3D Object Detection

BEVDepth:在 3D 目标检测中获取可靠深度

现有的基于 LSS 的 3D 目标检测算法中,其深度预测模块产生的深度预测结果不够可靠,本文通过加入深度监督,引入相机内外参编码以及深度精修模块,使得 LSS 产生的深度预测变得更加可靠。

论文链接:

https://arxiv.org/abs/2206.10092

开源链接:

https://github.com/Megvii-Bas...

image.png

所属领域:3D 检测

关键词:reliable depth

来源:旷视研究院
作者:R

专栏文章推荐

欢迎关注旷视研究院极术社区专栏,定期更新最新旷视研究院成果。欢迎添加极术小姐姐微信(id:aijishu20)加入技术交流群,请备注研究方向。
加入旷视:career@megvii.com
推荐阅读
关注数
7710
内容数
164
专注旷视研究院学术论文解读推送,涵盖计算机视觉,文字识别等
目录
极术微信服务号
关注极术微信号
实时接收点赞提醒和评论通知
安谋科技学堂公众号
关注安谋科技学堂
实时获取安谋科技及 Arm 教学资源
安谋科技招聘公众号
关注安谋科技招聘
实时获取安谋科技中国职位信息