行为识别实战第二天——Yolov5+SlowFast+deepsort: Action Detection(PytorchVideo)

Yolov5+SlowFast+deepsort

一、简介

YoloV5+SlowFast+DeepSort 是一个结合了目标检测、动作识别和目标跟踪技术的视频处理框架。这一集成系统利用了各自领域中的先进技术,为视频监控、体育分析、人机交互等应用提供了一种强大的解决方案。

1. 组件说明:

  • YoloV5: Yolo(You Only Look Once)是一个流行的实时目标检测系统,其第五代版本YoloV5通过深度学习模型快速准确地识别和定位图像中的多个对象。它适用于实时场景,因为可以快速处理图像并给出高精度的结果。
  • SlowFast: 这是一个视频动作识别网络,由 Facebook AI 研究院开发。它通过同时使用两个处理流——一个慢速流捕捉空间特征,一个快速流捕捉时间动态——来识别视频中的动作。这种结构使得SlowFast在处理复杂动作时能够更好地理解视频内容。
  • DeepSort: DeepSort 是一个轻量级的跟踪算法,它在简单的Sort(Simple Online and Realtime Tracking)算法基础上增加了深度学习特征。这使得DeepSort在保持跟踪对象的同时,能够有效处理遮挡和交互场景。

2. 技术运用:

在 YoloV5+SlowFast+DeepSort 集成系统中:

  • YoloV5 负责实时检测视频帧中的对象,为后续的动作识别和目标跟踪提供必要的前处理。
  • SlowFast 接收YoloV5的输出,即识别出的对象,并对这些对象执行动作识别。通过分析对象随时间的动态变化,SlowFast能够判断对象正在进行的动作。
  • DeepSort 则在此基础上进行目标跟踪,通过连续帧中的动作和位置变化,持续跟踪各个对象,即使在复杂场景中也能维持较高的跟踪准确性。

3. 比单独使用SlowFast的优点:

  • 实时性和综合分析:相比于单独的SlowFast,集成系统通过YoloV5提供实时目标检测,可以在每一帧中都识别和标注出目标,而不仅仅是动作识别。这对于需要实时反应和处理的应用来说,提供了更大的灵活性和实用性。
  • 动作和目标的精确跟踪:通过DeepSort,系统不仅可以识别动作,还可以精确地跟踪动作的执行者,即使在目标快速移动或部分遮挡的情况下也能持续追踪。这对于需要长时间监控特定个体或对象的场景尤为重要。

4. 意义:

这种集成的技术方案极大地扩展了视频分析的应用范围,使其不仅限于简单的动作识别,还包括了复杂环境中的实时多目标检测与追踪。对于安全监控、体育比赛分析、交互式媒体等领域,YoloV5+SlowFast+DeepSort 提供了一个高效、精确的工具,能够满足这些领域对实时性、准确性和鲁棒性的高要求。

二、环境配置

环境配置见:行为识别实战第一天——Slowfast行为识别部署-CSDN博客

三、文件准备

下载下面文件备用:

文件分享

 GitHub - Whiffe/yolov5-slowfast-deepsort-PytorchVideo

将 yolov5-master.zip放在yolov5-file,

将SLOWFAST_8x8_R50_DETECTION.pyth放在slowfast_file,

将yolov5l6.pt放在根目录yolov5-slowfast-deepsort-PytorchVideo-main。

 

sudo cp yolov5-file/yolov5-master.zip /home/ps/.cache/torch/hub/master.zipsudo cp slowfast_file/SLOWFAST_8x8_R50_DETECTION.pyth /home/ps/.cache/torch/hub/checkpoints/SLOWFAST_8x8_R50_DETECTION.pyth

四、运行

1.mp4 放在根目录下,

python yolo_slowfast.py --input 1.mp4

最后结果视频保存在output.mp4.

配置好的完整代码分享,100%可以运行:

 https://download.csdn.net/download/qq_34717531/89682626?spm=1001.2014.3001.5503

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/web/51465.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

51单片机最快能生成多高频率的方波?

前言 在嵌入式系统开发中,51 单片机作为一种非常非常非常经典,贯穿上下几十年的微控制器,被广泛应用于各种电子项目中。其中,生成特定频率的方波信号是一项常见的需求。 那么,51 单片机究竟能以多快的速度生成方波呢&…

postgresql版本升级

从postgresql 12升级至postgresql 14。 同一大版本的小版本无需更新数据目录,直接更新程序目录,但是要注意重新编译安装插件。 个人建议大版本中的小版本更新至5以上再使用,例如发稿时最新稳定版为16.4,建议至16.5以后再考虑升级…

26 colorchooser组件

Tkinter colorchooser 组件使用指南 Tkinter 的 colorchooser 组件提供了一个图形界面,用于选择颜色。它允许用户通过标准的颜色选择对话框来选择颜色,非常适合需要颜色选择功能的GUI应用程序。以下是对 colorchooser 组件的详细说明和一个使用案例。 …

UNI-APP 打包构建 APK

UNI-APP 打包构建 APK 前言一、WINDOWS(在线 - 纯命令版)依赖其他前置准备实现原理操作步骤 二、WINDOWS(离线 - Android Studio 版)依赖(首次构建需要联网安装依赖)其他前置准备实现原理操作步骤 三、WIND…

【Java】Java 设计模式之工厂模式与策略模式

Java设计模式是软件工程中一系列被反复使用、多数人知晓的、经过分类编目的、代码设计经验的总结,它们代表了最佳的实践,帮助开发者解决在软件设计过程中遇到的各种问题。这些模式可以根据其用途分为三大类:创建型、结构型和行为型&#xff0…

网络安全的历史

如今,网络安全几乎成为各大公司和利益相关者关注的焦点。但在早期,网络安全的概念非常模糊。 直到多年以后,由于网络攻击和危险实体威胁的频繁发生,网络安全的发展才受到重视。这些措施的发展成为了网络安全的演变。 网络安全起…

el-pagination 下拉条目数最后一个样式改成全部

2024.08.27今天我学习了如何把el-pagination的下拉条目数修改,效果如下: 我们需要把最后一条选择换成全部展示,其实传给后端的还是总的数量,只是换了一个content, 通过f12查看元素可以拿到.el-select-dropdown__item …

创建django项目时遇到的改项目名字问题

问题描述 今天在学习时遇到了一些问题,现记录一下。 今天我利用 ‘django-admin startproject 项目名字’命令创建了一个项目,并觉得当时项目名字没有命好,所以就随性的运行了 ’rename 旧项目名字 新项目名字‘这一命令。但是随后就出现…

使用idea快速创建springbootWeb项目(springboot+springWeb+mybatis-Plus)

idea快速创建springbootWeb项目 详细步骤如下 1)创建项目 2)选择springboot版本 3)添加web依赖 4)添加Thymeleaf 5)添加lombok依赖 然后点击create进入下一步 双击pom.xml文件 6)添加mybatis-plus依赖 …

java.util.Optional.or() .orElse(), .orElseGet()的区别

java.util.Optional 是 Java 8 引入的一个容器类,用于表示一个可能包含或不包含非空值的对象。它提供了多种方法来处理可能为空的对象,从而避免使用null值。 在 Optional 中,.or(), .orElse(), 和 .orElseGet() 都是用于处理可能为空的值的方…

7-10 简单求阶乘问题

本题要求编写程序&#xff0c;计算N的阶乘。 输入格式: 输入在一行中给出一个不超过12的正整数N。 输出格式: 在一行中输出阶乘的值。 输入样例: 4输出样例: 24 #include <stdio.h>int Fac(int x){if(x1) return 1;// 递归出口return x*Fac(x-1);// 递归 } int m…

C_03_函数学习

函数 优点&#xff1a; 降低代码耦合度降低代码冗余度提高代码复用率提高代码可读性 思想&#xff1a; 封装【包装】 声明&#xff1a; 语法&#xff1a; extern 函数名(形参列表)&#xff1b;// 注意&#xff1a;此时 形参列表中变量名可以忽略不写&#xff1b;定义&#xff1…

47.【C语言】指针(重难点)(J)

目录 26.自制排序函数(★★) *分析 *代码 往期推荐 26.自制排序函数 *分析 之前在42.【C语言】冒泡排序写过一个排序函数&#xff0c;可以将此自制一个类似qsort的函数 画圈的地方是需要修改的 #include <stddef.h> void bubble_sort(void* base, size_t num,size_t w…

面试被面试官问:3D目标检测预处理优化策略有哪些?

01 前言&#xff1a; 3D目标检测是计算机视觉领域中一个重要的任务&#xff0c;广泛应用于自动驾驶、机器人导航、无人机等领域。由于3D数据的复杂性和多样性&#xff0c;数据预处理在3D目标检测中扮演着关键角色。良好的预处理策略不仅可以提升模型的检测精度&#xff0c;还可…

并发知识笔记

一、使用线程持有变量获取线程执行结果 /*** 线程持有变量*/private static final ThreadLocal<Map<String, Object>> MAP_THREAD_LOCAL ThreadLocal.withInitial(HashMap::new);// ----------------------------------------------------------------正文int dat…

Day1:88. 合并两个有序数组、27.移除元素、26.删除有序数组中的重复项

此次挑战的是leetcode面试150题&#xff0c;每天刷三题&#xff0c;争取一小时内结束。 88. 合并两个有序数组 思路直接想到&#xff0c;双指针&#xff0c;从后往前放&#xff08;避免数组移动&#xff09;&#xff0c;但是没有考虑到nums1结束了&#xff0c; nums2还没结束…

Flat Ads:全球金融应用的营销投放洞察

随着移动互联网的普及,金融应用在全球范围内迅速崛起。无论是移动银行、支付服务,还是理财工具,金融类应用已经成为现代生活中不可或缺的一部分。根据最新的行业报告,全球金融应用的下载量和用户活跃度在过去几年里持续增长,尤其是在新兴市场,用户对数字金融服务的需求不断攀升…

力扣top100-链表类题易错点总结-c++实现(更新中)

首先给一个我之前写的双指针在链表类题中的妙用的link&#xff1a;双指针在链表中的妙用 tip1 来自“合并两个有序链表” 题目链接戳这里 这道题注意的就是如果是要返回一个新链表的头结点&#xff0c;一定要新建一个头结点&#xff1a; ListNode* prehead new ListNode…

java框架第二课(Reflection反射机制)

一.关于反射 (1)使用场景介绍 平常我们写代码时&#xff0c;都是已知类名&#xff0c;类的属性&#xff0c;构造方法&#xff0c;其他方法等信息&#xff0c;然后根据类名new对象&#xff0c;这个过程称为正向操作(例如&#xff1a;有一个管理员类&#xff0c;有账号和密码属…

【SQL】三角形判断

目录 题目 分析 代码 题目 表: Triangle ------------------- | Column Name | Type | ------------------- | x | int | | y | int | | z | int | ------------------- 在 SQL 中&#xff0c;(x, y, z)是该表的主键列。 该表的每一行包…