您当前的位置: 首页 > 

暂无认证

  • 1浏览

    0关注

    100387博文

    0收益

  • 0浏览

    0点赞

    0打赏

    0留言

私信
关注
热门博文

DeepSOCIAL:基于YOLOv4的人群距离监测!集检测、跟踪以及逆透视映射一体的系统!...

发布时间:2021-07-30 07:00:00 ,浏览量:1

点击上方“3D视觉工坊”,选择“星标”
干货第一时间送达

论文:https://doi.org/10.3390/app10217514

代码:https://github.com/DrMahdiRezaei/DeepSOCIAL

大家好,今天跟大家分享开源项目!

由于疫情的原因,全球大多数政府和国家卫生当局已将2米的身体距离作为购物中心、学校和其他覆盖地区的强制性安全措施。在本研究中,开发了一个通用的基于深度神经网络的模型,用于自动人群检测、跟踪和人群间距离估计,使用常见的闭路电视安全摄像机。提出的模型包括一个基于yolov4的框架和反透视映射,用于在具有挑战性的条件下(包括人群遮挡、部分能见度和照明变化)进行准确的人检测和社交距离监测。我们还提供了一个在线风险评估方案,通过统计分析来自移动轨迹和违反社交距离率的时空数据。我们确定病毒传播和感染可能性最高的高危地区。这可能有助于当局重新设计公共场所的布局,或采取预防措施,以减轻高风险区域。提出的方法的效率在牛津镇中心数据集上进行了评估,与三种最先进的方法相比,该方法在准确性和速度方面具有更高的性能。

一、demo效果展示

demo已经上传到视频号上了,可以直接点击观看,欢迎关注!

二、论文内容介绍

本文的主要贡献:

  • 该研究旨在通过自动监测和检测个人之间的社交距离违反行为的人工智能解决方案,为减少新冠病毒的传播和经济成本提供支持。

  • 我们开发了最精确(如果不是最精确)的深度神经网络(DNN)模型之一,用于人类检测、跟踪和距离估计,称为DeepSOCIAL。

  • 我们通过对现场人员移动的时空数据进行分析,进行实时和动态的风险评估。

  • 开发的模型是通用的人体检测和跟踪器,不局限于社交距离监测,可以应用于各种现实世界的应用,如自动驾驶汽车中的行人检测、人体动作识别、异常检测和安全系统。

设计到的技术:

1、行人检测

目标是开发一个模型来检测人类(人)的各种挑战,如服装的变化,姿势,远近距离,有/没有遮挡,以及在不同的光照条件下。(这里选用了 YOLOv4)

2、行人跟踪

检测阶段之后的下一步是对每个人进行跟踪和ID分配。

这里使用了Simple Online and Real-time(SORT) 算法进行跟踪(卡尔曼滤波(Kalman Filter)和匈牙利算法(Hungarian algorithm)结合到一起)

详细的可以参考:https://zhuanlan.zhihu.com/p/59148865(多目标跟踪:SORT和Deep SORT)

3、 距离估计

这里使用单目视觉的解决方案,使用单个摄像机,将三维世界场景投影到二维透视图像平面,导致物体之间的像素距离不切实际。这被称为透视效应,在这种效应中,我们不能感知到距离在整个图像中的均匀分布。

在三维空间中,每个框的中心或参考点与三个参数 (x,y,z)相关联,而在从相机接收到的图像中,原来的三维空间被缩减为二维(x,y),深度参数(z)不可用。在这样一个低维空间中,直接使用欧几里得距离准则来测量人与人之间的距离估计是错误的

为了应用校准的IPM过渡,我们首先需要通过设置深度参数 z = 0来消除透视效果进行摄像机校准。我们还需要知道相机的位置,高度,视觉等

整体的流程:

论文:https://doi.org/10.3390/app10217514

代码:https://github.com/DrMahdiRezaei/DeepSOCIAL

最后的最后

最后,ICCV 2021 论文和代码正在爆肝整理中! 

https://github.com/DWCTOD/ICCV2021-Papers-with-Code-Demo

欢迎star

本文仅做学术分享,如有侵权,请联系删文。

下载1

在「3D视觉工坊」公众号后台回复:3D视觉,即可下载 3D视觉相关资料干货,涉及相机标定、三维重建、立体视觉、SLAM、深度学习、点云后处理、多视图几何等方向。

下载2

在「3D视觉工坊」公众号后台回复:3D视觉github资源汇总,即可下载包括结构光、标定源码、缺陷检测源码、深度估计与深度补全源码、点云处理相关源码、立体匹配源码、单目、双目3D检测、基于点云的3D检测、6D姿态估计源码汇总等。

下载3

在「3D视觉工坊」公众号后台回复:相机标定,即可下载独家相机标定学习课件与视频网址;后台回复:立体匹配,即可下载独家立体匹配学习课件与视频网址。

重磅!3DCVer-学术论文写作投稿 交流群已成立

扫码添加小助手微信,可申请加入3D视觉工坊-学术论文写作与投稿 微信交流群,旨在交流顶会、顶刊、SCI、EI等写作与投稿事宜。

同时也可申请加入我们的细分方向交流群,目前主要有3D视觉、CV&深度学习、SLAM、三维重建、点云后处理、自动驾驶、多传感器融合、CV入门、三维测量、VR/AR、3D人脸识别、医疗影像、缺陷检测、行人重识别、目标跟踪、视觉产品落地、视觉竞赛、车牌识别、硬件选型、学术交流、求职交流、ORB-SLAM系列源码交流、深度估计等微信群。

一定要备注:研究方向+学校/公司+昵称,例如:”3D视觉 + 上海交大 + 静静“。请按照格式备注,可快速被通过且邀请进群。原创投稿也请联系。

▲长按加微信群或投稿

▲长按关注公众号

3D视觉从入门到精通知识星球:针对3D视觉领域的视频课程(三维重建系列、三维点云系列、结构光系列、手眼标定、相机标定、orb-slam3等视频课程)、知识点汇总、入门进阶学习路线、最新paper分享、疑问解答五个方面进行深耕,更有各类大厂的算法工程人员进行技术指导。与此同时,星球将联合知名企业发布3D视觉相关算法开发岗位以及项目对接信息,打造成集技术与就业为一体的铁杆粉丝聚集区,近2000星球成员为创造更好的AI世界共同进步,知识星球入口:

学习3D视觉核心技术,扫描查看介绍,3天内无条件退款

 圈里有高质量教程资料、可答疑解惑、助你高效解决问题

觉得有用,麻烦给个赞和在看~  

关注
打赏
1655516835
查看更多评论
立即登录/注册

微信扫码登录

0.2565s