前往小程序,Get更优阅读体验!
立即前往
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
社区首页 >专栏 >【SLAM】开源 | Co-Fusion: 多目标的实时分割、跟踪和融合方法,物体级别的语义SLAM!

【SLAM】开源 | Co-Fusion: 多目标的实时分割、跟踪和融合方法,物体级别的语义SLAM!

作者头像
CNNer
发布于 2020-11-03 02:34:24
发布于 2020-11-03 02:34:24
9800
举报
文章被收录于专栏:CNNerCNNer

论文地址: http://arxiv.org/pdf/1706.06629v1.pdf

代码: https://github.com/martinruenz/co-fusion

来源: 英国伦敦大学学院

论文名称:Co-Fusion: Real-time Segmentation, Tracking and Fusion of Multiple Objects

原文作者:Martin Runz

内容提要

本文介绍了一种稠密SLAM系统——Co-Fusion,以实时的RGB-D图片流为输入,并分割场景为不同物体(使用运动或语义线索),同时实时跟踪和重建它们的3D形状。本文使用了一种多模型拟合方法,其中每个物体可以独立于背景进行运动,并能够被有效地跟踪,同时它的形状使用与该物体标号关联的像素跟随时间进行融合。以往试图解决动态场景,通常假设运动区域为外点,并且不建模它们的形状或跟踪它们随时间的运动。相反地,我们让机器人维护每个物体的3D模型,并随时间的进行融合提高模型结果。因此,本文的系统能够使机器人以物体级别描述场景,具有和环境交互的潜力,在动态环境中也适用。

主要框架及实验结果

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2020-10-24,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 CNNer 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
【SLAM】开源 | 清华大学-- DS-SLAM:面向动态环境的语义视觉SLAM,性能SOTA!
论文地址: http://arxiv.org/pdf/1809.08379v2.pdf
CNNer
2020/09/23
4.5K0
【SLAM】开源 | 清华大学-- DS-SLAM:面向动态环境的语义视觉SLAM,性能SOTA!
【SLAM】开源 | RGB-iD SLAM:RGB-D相机的完整的SLAM系统,性能SOTA!
论文地址: http://arxiv.org/pdf/1807.08271v1.pdf
CNNer
2020/09/23
9250
【SLAM】开源 | RGB-iD SLAM:RGB-D相机的完整的SLAM系统,性能SOTA!
【SLAM】DefSLAM:第一个能够在变形场景中实时操作的单目SLAM!
论文地址: http://arxiv.org/pdf/1908.08918v2.pdf
CNNer
2021/01/12
9670
【传感器融合】开源 | EagerMOT在KITTI和NuScenes数据集上的多个MOT任务中,性能SOTA!
论文地址: link: http://arxiv.org/pdf/2104.14682v1.pdf
CNNer
2021/10/27
1.8K0
【视频目标分割】开源 | 一种新的无监督学习方法用于视频目标分割
备注:研究方向+地点+学校/公司+昵称,更快通过申请,长按加细分领域技术交流群,目前有细分领域:图像分割、图像目标检测、论文写作、车道检测、模型优化、目标跟踪、SLAM、点云处理(分割检测)、深度学习。
CNNer
2021/12/22
6720
【视频目标分割】开源 | 一种新的无监督学习方法用于视频目标分割
MaskFusion:惊艳的结合实例感知、语义分割、动态追踪的SLAM系统
(关注“我爱计算机视觉”公众号,一个有价值有深度的公众号~) 继ECCV2018将于9月份在德国慕尼黑开幕,增强现实领域盛会ISMAR2018也将于10月下旬在慕尼黑召开,与ECCV在国内CV学术和工业界领域大热不同,ISMAR在国内还不是广为人知。 今天跟大家分享的工作来自University College London的论文《MaskFusion: Real-Time Recognition, Tracking and Reconstruction of Multiple Moving Objects》,
CV君
2019/12/27
1K0
MaskFusion:惊艳的结合实例感知、语义分割、动态追踪的SLAM系统
SLAM综述(3)-视觉与惯导,视觉与深度学习SLAM
视觉SLAM的稳定性是一项技术挑战。因为基于单目的视觉SLAM需要初始化、尺度的不确定性和尺度漂移等问题[1]。尽管立体相机和RGB-D相机可以解决初始化和缩放的问题,但也存在一些不容忽视的问题,如运动速度快、视角小、计算量大、遮挡、特征丢失、动态场景和光照变换等。针对以上这些问题传感器的融合方案逐渐流行起来,IMU与相机融合的视觉里程计成为研究热点。
点云PCL博主
2020/05/19
2.9K0
详解|无人驾驶技术之魂——SLAM的现在与未来
本文节选自图书《视觉SLAM十四讲:从理论到实践》,该书系统介绍了视觉SLAM(同时定位与地图构建)所需的基本知识与核心算法,既包括数学理论基础,又包括计算机视觉的算法实现。 此外,还提供了大量的实例代码供读者学习研究,从而更深入地掌握这些内容。本文转自人工智能头条。 作者 | 高翔 张涛 刘毅 颜沁睿 当前的开源方案 本文将主要介绍现有的SLAM方案,到底能做到怎样的程度,尤其会关注提供开源实现的方案。 在SLAM研究领域,能见到开源方案是很不容易的。往往论文中介绍理论只占20%的内容,其他80
AI科技大本营
2018/04/27
1.9K0
详解|无人驾驶技术之魂——SLAM的现在与未来
【目标跟踪】开源 | ROFT:一种卡尔曼滤波方法,从RGB-D图像流中快速、精确的跟踪6D目标的姿态和速度
备注:研究方向+地点+学校/公司+昵称,更快通过申请,长按加细分领域技术交流群,目前有细分领域:图像分割、图像目标检测、论文写作、车道检测、模型优化、目标跟踪、SLAM、点云处理(分割检测)、深度学习。
CNNer
2021/12/22
7140
【目标跟踪】开源 | ROFT:一种卡尔曼滤波方法,从RGB-D图像流中快速、精确的跟踪6D目标的姿态和速度
RAL2022 | SO-SLAM:具有尺度比例和对称纹理约束的语义物体 SLAM
作者:Ziwei Liao, Yutong Hu, Jiadong Zhang, Xianyu Qi, Xiaoyu Zhang, Wei Wang*
3D视觉工坊
2022/06/28
8710
RAL2022 | SO-SLAM:具有尺度比例和对称纹理约束的语义物体 SLAM
漫谈 SLAM 技术(下)
本文讲解了视觉里程计(Visual Odometry)和SLAM(Simultaneous Localization and Mapping)的基本概念、发展历程、主要算法及其在实际应用中的优势和挑战。作者通过对这些概念和算法的介绍,使读者对视觉里程计和SLAM有了更加深入的了解。同时,文章还介绍了目前该领域的一些研究热点和未来发展方向,对于想要深入了解视觉里程计和SLAM的读者具有重要的参考价值。
DancingWind
2017/09/12
19.3K1
漫谈 SLAM 技术(下)
​OA-SLAM:在视觉SLAM中利用物体进行相机重定位
文章:OA-SLAM: Leveraging Objects for Camera Relocalization in Visual SLAM
点云PCL博主
2023/08/25
6920
​OA-SLAM:在视觉SLAM中利用物体进行相机重定位
语义SLAM开源代码汇总
之前做的深度学习闭环检测 这方面,最近想了解下语义这方面,于是总结了一些开源的语义SLAM代码共后面研究:
3D视觉工坊
2021/03/19
2.3K0
【SLAM】开源 | 基于RGB-D摄像机与高效实时导航算法的开源低成本移动机器人系统
论文地址: http://arxiv.org/pdf/2103.03054v3.pdf
CNNer
2023/02/28
5360
【SLAM】开源 | 基于RGB-D摄像机与高效实时导航算法的开源低成本移动机器人系统
【SLAM】开源 | 香港科技大学--实时可扩展的稠密面元建图方案,性能优越!
论文地址: https://arxiv.org/pdf/1909.04250v1.pdf
CNNer
2021/02/24
1.2K0
【SLAM】开源 | 香港科技大学--实时可扩展的稠密面元建图方案,性能优越!
SLAM刚刚开始的未来之“工程细节”
作者 | 张哲 责编 | 何永灿 SLAM最近三年随着算法不断成熟、硬件不断增强、应用场景逐渐丰富,在学术界和工业界都有长足发展。在六月初新加坡刚刚结束的国际机器人顶级会议之一的ICRA 2017 ,机器人研究的方向和种类繁多,但计算机视觉、SLAM(同步定位和建图)、建图、空中机器人(泛指各类无人机)、距离感知、RGB-D感知这几个话题的track加在一起已经占到所有track的一半左右。 笔者根据这次的大会所见所闻和自己在机器人领域十多年(尤其是最近一年多在PerceptIn全面推进软硬件一体化智能感知
用户1737318
2018/07/20
1.1K0
【经典论文回顾】【SLAM】开源 | ORB-SLAM2 第一个完整的单目,双目和RGB-D相机的开源SLAM方案
代码: https://github.com/raulmur/ORB_SLAM2.git
CNNer
2020/10/21
1.6K0
【经典论文回顾】【SLAM】开源 | ORB-SLAM2 第一个完整的单目,双目和RGB-D相机的开源SLAM方案
用 YOLO v5+DeepSORT,打造实时多目标跟踪模型
内容概要:目标跟踪作为一个非常有前景的研究方向,常常因为场景复杂导致目标跟丢的情况发生。本文按照跟踪目标数量的差异,分别介绍了单目标跟踪及多目标跟踪。
HyperAI超神经
2021/08/25
1.6K0
【多目标跟踪】开源 | 一种分布式多目标融合算法,融合局部多目标状态估计方法,实时计算效率和精度SOTA!
论文地址: http://arxiv.org/pdf/2012.12990v2.pdf
CNNer
2021/12/05
7290
【多目标跟踪】开源 | 一种分布式多目标融合算法,融合局部多目标状态估计方法,实时计算效率和精度SOTA!
CV Code | 计算机视觉开源周报20191001期
ICCV 2019 临近,不少论文和相应代码公布,也包括其中的WorkShop的工作。
CV君
2019/12/27
6800
推荐阅读
【SLAM】开源 | 清华大学-- DS-SLAM:面向动态环境的语义视觉SLAM,性能SOTA!
4.5K0
【SLAM】开源 | RGB-iD SLAM:RGB-D相机的完整的SLAM系统,性能SOTA!
9250
【SLAM】DefSLAM:第一个能够在变形场景中实时操作的单目SLAM!
9670
【传感器融合】开源 | EagerMOT在KITTI和NuScenes数据集上的多个MOT任务中,性能SOTA!
1.8K0
【视频目标分割】开源 | 一种新的无监督学习方法用于视频目标分割
6720
MaskFusion:惊艳的结合实例感知、语义分割、动态追踪的SLAM系统
1K0
SLAM综述(3)-视觉与惯导,视觉与深度学习SLAM
2.9K0
详解|无人驾驶技术之魂——SLAM的现在与未来
1.9K0
【目标跟踪】开源 | ROFT:一种卡尔曼滤波方法,从RGB-D图像流中快速、精确的跟踪6D目标的姿态和速度
7140
RAL2022 | SO-SLAM:具有尺度比例和对称纹理约束的语义物体 SLAM
8710
漫谈 SLAM 技术(下)
19.3K1
​OA-SLAM:在视觉SLAM中利用物体进行相机重定位
6920
语义SLAM开源代码汇总
2.3K0
【SLAM】开源 | 基于RGB-D摄像机与高效实时导航算法的开源低成本移动机器人系统
5360
【SLAM】开源 | 香港科技大学--实时可扩展的稠密面元建图方案,性能优越!
1.2K0
SLAM刚刚开始的未来之“工程细节”
1.1K0
【经典论文回顾】【SLAM】开源 | ORB-SLAM2 第一个完整的单目,双目和RGB-D相机的开源SLAM方案
1.6K0
用 YOLO v5+DeepSORT,打造实时多目标跟踪模型
1.6K0
【多目标跟踪】开源 | 一种分布式多目标融合算法,融合局部多目标状态估计方法,实时计算效率和精度SOTA!
7290
CV Code | 计算机视觉开源周报20191001期
6800
相关推荐
【SLAM】开源 | 清华大学-- DS-SLAM:面向动态环境的语义视觉SLAM,性能SOTA!
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档
查看详情【社区公告】 技术创作特训营有奖征文