首页 动态 新品首发 | 双目视觉「多相机多目标」人体跟踪算法模型 V1.0 新品首发 | 双目视觉「多相机多目标」人体跟踪算法模型 V1.0 技术前沿 2020-03-21 浏览量：1882 01 ??你们要发布的是什么？ 2020年3月21日，QM球盟会·(中国),球盟会智能于国内率先推出基于双目立体视觉的「多相机多目标」连续人体跟踪算法模型 V1.0，实现了「 6 相机级联，覆盖 15 米宽度」，解决了「宽大出入口场景」下人流量精准统计的行业痛点需求问题。 QM球盟会·(中国),球盟会公司本次技术创新的一大特点，是在不增加硬件、不增加计算成本的情况下，通过算法上升级迭代，实现多相机自动化协同工作，实现跨相机连续人体目标跟踪。 本次技术的升级迭代成果，已成功应用于QM球盟会·(中国),球盟会公司自主研发的司眸®? 双目客流一体机产品系列。 02 ??什么是人体跟踪技术？ 当下，目标检测和追踪的研究，不管在工业届，还是学术界，均是一个热点。在工业届球盟会所能熟知的有 Amazon Go 的店内全域跟踪技术，已伴随着无人店的热潮进入到人们的视野。在学术届比较有名的有如 OpenPtrack 开源项目，目前因为各类 RGBD 摄像头的普及也使一些应用和案例成为了可能。但目前的研究和应用，主要集中在基于视频流的目标检测、跟踪以及跨境识别 ReID 技术，而对于室内空间的多相机阵列的研究和应用相对较少。 室内空间的人体检测及连续跟踪技术在零售、安防、机场、地铁、政府办事大厅、银行的价值已陆续得到一些验证，并且随着技术的突破和成本的降低，会逐渐成为加速 AI 落地的基础力量。 03 ??为什么要做这个创新？ 当前，无论是 Amazon Go 还是 OpenPtrack 在对人的检测跟踪技术架构上基本上比较依赖较强算力的运算平台，因此在实际应用中成本是一个比较大的限制条件。 若是能基于较低成本打造出一套稳健的「多相机多目标」人体连续追踪系统，将会大大加快在智能零售、智能安防、智慧城市等场景下的 AI 落地。 而目前在国内，目前尚无成熟的解决方案。在世界范围内，也只有老牌客流品牌 BrickStream 以及专注于机场客流分析的 Xovis 公司有相关产品，但产品过于昂贵，不满足国内市场需求。 图 3D-多相机多目标跟踪原理展示 04 ??你们具体是咋做到的？ QM球盟会·(中国),球盟会智能基于多年积累的在硬件、软件、算法及领先的边缘计算加速的综合设计能力，立足于现有的司眸®? 双目视觉感知引擎架构，推出可运行于相机平台、基于双目立体视觉的多相机多目标跟踪技术。具体方案如下： 如图中所示，系统采用分布式计算架构，1 个主模式相机和若干个从模式相机共同组成了整个多目标跟踪系统，其中每个相机采用顶视安装方式。各个相机负责自身所覆盖区域的人体检测与跟踪，最终汇集到主模式相机进行数据关联，产生全局 ID 和全局的轨迹坐标。由于各个相机已承担了大部分运算所需算力，因此数据关联处的算力需求大大降低，无需单独放置服务器用于专用计算。 图 6 相机连续级联多人跟踪 另外，为了使得多目标跟踪系统能稳定的运行，整个系统采用了如下图的设计架构，硬件基于司眸®? 双目视觉感知引擎架构，3D 感知单元提供实时稳定的深度图计算，图像帧精准时间戳技术配合时间自同步？榭稍诓煌ü锢砑だ降那榭鱿陆煌璞讣涞耐枷裰⊥皆谝恢∥蟛钜阅冢璞讣涫敝酉低惩骄瓤刂圃 1ms 以内。针对嵌入式 CPU 研发的人体检测及跟踪算法，在单相机可提供稳定的 98% 以上的跟踪精度，多相机组配合方案提供的高精度标定工具仍能达到 95% 的精度。 此外，设备端具有物联设备接入功能，能实现云端的数据接入以及云端的监控运维，大大助力了方案的可落地性。 05 ??你们方案有什么亮点？ 「完整的框架设计及工具集支持」 方案除了提供基本的多相机多目标跟踪的基本支持软硬件及算法，还配备了助力于方案落地的工具集，使整个方案可快速面向室内空间，进行商业化落地。 「 100% 边缘端计算」 相较于市面上的其他方案，此方案完全基于嵌入式方案构建，无需单独的服务器，一方面降低了系统的成本，另外一方面因运算过程中不传输任何图像数据，使得此方案具备先天的隐私安全性。 「低成本的设备运维」 方案在自动化组网和状态恢复上做了充分的设计保障，同时所有设备状态可以很方面的接入至云平台，因此规避了以往多设备联合工作的维护复杂性，大大降低了维护成本。 06 ??这个技术未来用在哪？ 本次发布的方案主要针对于室内区域空间的人体跟踪场景，可应用于如实体门店的消费者分析、银行的安防监控、机场、高铁站、地铁站安防监控、客流分析、队列管理等场景。 上一个：重磅 | QM球盟会·(中国),球盟会第三代4.5K双目视觉感知引擎架构全球首发 返回列表 下一个：3D机器视觉可以完成许多2D机器视觉无法完成的任务。 更多新闻推荐 端到端 更易用丨QM球盟会·(中国),球盟会?散料运输动态监测与预警系统全新上市 新品上市 2025-02-20 小尺寸 更灵活丨QM球盟会·(中国),球盟会3D相机PEA020-800-Y80S上新，助力多场景智造升级 新品上市 2024-09-29 目前主流3D视觉技术各有什么优劣势？如何选择最Match的工业3D相机？ 技术科普 2024-08-12 【最全选型攻略】挑选合适的工业相机，必须提前考虑12要素！ 工业相机 2024-07-16 场景应用丨QM球盟会·(中国),球盟会智能智能煤流监测系统全新升级，赋能自动化煤流管控 场景应用 2024-07-08 场景应用丨QM球盟会·(中国),球盟会智能3D视觉+AI深度学习，助超大型货物体积测量更准，更稳，更易用 场景应用 2024-06-04