摘要

本文面向安防与教育园区的暴力行为实时检测场景,基于 Flask + Flask-SocketIO + HTML/CSS/JS 构建端到端 Web 平台,后端集成 YOLOv5–YOLOv12(共 8 种) 检测算法,统一训练与推理接口,并在页面中提供模型选择/权重上传能力。系统支持图片/视频/浏览器摄像头三类输入源,提供即时双画面对比(等宽 16:9 自适应)与视频同步双帧播放,含进度控制/暂停/继续/停止,并内置 Conf/IoU 调节、类别筛选。检测结果支持CSV 导出带框结果一键下载(图片/视频)、SQLite 入库跨页共享记录,同时实现登录/注册(可跳过)与会话管理,保障易用性与安全性(口令哈希、最小权限)。前端可交互查看各模型的mAP、F1、PR 曲线与训练曲线,对比 YOLOv5n、YOLOv6n、YOLOv7-tiny、YOLOv8n、YOLOv9t、YOLOv10n、YOLOv11n、YOLOv12n 的速度与精度并可切换在线推理。平台还提供进度与告警提示结果高亮与溯源定位一键清理/批量导出等工程化细节,兼顾边缘部署与桌面 GPU 环境。文末提供完整工程与数据集下载链接,便于复现与二次开发。

➷点击跳转至文末所有涉及的完整代码文件下载页☇


1. 网页功能与效果

(1)登录注册:提供登录、注册与一次性跳过三种入口,跳过仅在当前会话生效以便快速体验。登录后启用个性化配置与权限控制,口令采用哈希存储并结合会话超时与最小权限策略,保障便捷与安全。
在这里插入图片描述

(2)功能概况:统一接入图片、视频与浏览器摄像头,支持等宽16:9双画面对比与同步双帧展示。面板内置Conf/IoU调节、类别筛选、结果CSV导出与带框图片/视频一键下载,检测记录写入SQLite并跨页共享。
在这里插入图片描述

(3)视频检测:提供播放进度、暂停、继续、停止等控制,时间轴与结果联动,便于逐帧复核。浏览器摄像头或上传视频均可实时推理,并支持缓冲导出为MP4以便归档与复查。
在这里插入图片描述

(4)更换模型:上传权重即可切换当前YOLO模型,类别与阈值面板同步刷新且无需重启。路径规范保持跨平台兼容,数据库自动迁移保障升级不丢数据;导出结果集中管理,支持批量下载与溯源定位。
在这里插入图片描述

(5)概览界面:首页仪表盘汇总最近任务、误检提醒与处理进度,提供快速入口直达图片/视频/摄像头检测与导出视图。内置mAP、F1、PR与训练曲线预览,支持按时间与标签筛选,便于运维与决策。
在这里插入图片描述


2. 绪论

2.1 研究背景与意义

视频安防从“事后取证”正加速转向“事中告警与可追溯”,而暴力行为往往呈现短时爆发、遮挡严重与光照变化剧烈等特征,要求检测系统在保证精度的同时实现低时延与可解释可视化 1。(CJIG) 基于真实监控场景的数据集(如 RWF-2000)揭示了弱光、运动模糊与视角变化对检测器的鲁棒性挑战,并给出了可复现实验基座 2。(arXiv) 工程实践中,YOLO 家族凭借端到端回归范式在速度/精度上长期占优,成为工业落地的事实标准之一 3。(Jeit) 新一代无 NMS 或弱依赖 NMS 的端到端检测器(如 RT-DETR)进一步降低了后处理瓶颈,为“毫秒级告警”提供了新的技术路径 4。(arXiv) 部署侧,TensorRT 等推理加速与 ONNX Runtime 量化构成边缘与云端统一的加速链路,是实现高并发与低时延告警的关键工程抓手 5。(NVIDIA Docs)

2.2 国内外研究现状

围绕“校园/园区暴力”任务,早期工作以群体运动模式与全局流场为线索(如 Violent Flows)建立实时二分类基线,并提出用于评测的真实场景视频集 7。(Open University) 随后,弱监督异常检测数据集(如 UCF-Crime)在长时序监控下引入 MIL 评测协议,促进了行为级告警研究 8。(CRCV) 近年来的 RLVS 等公开集覆盖复杂人群冲突场景,强调非受控拍摄条件下的时空线索建模价值 9。(TIB Service)

算法范式方面,两阶段检测以 RPN+分类分治在精度上具备上限优势但实时性受限 10;anchor-free 一阶段方法如 FCOS 通过“逐像素回归”规避锚框超参敏感问题 11;CenterNet 以中心点回归简化检测管线并在 COCO 上实现较优速度-精度权衡 12;RetinaNet 的 Focal Loss 以重加权抑制易样本主导,显著缓解正负极不均衡 13。(arXiv)

YOLO 系列在工业部署中持续迭代:YOLOX 引入解耦头与 SimOTA 提升训练稳定性与泛化 14;PP-YOLOE 以 Anchor-free 设计与 ET-Head/TAL 优化并报告在 V100 上的实测高 FPS 与高 mAP 15;YOLOv7 通过可训练“freebies”刷新速度-精度边界 16;Ultralytics YOLOv8 采用分离头与统一生态,降低任务一体化集成门槛 17;YOLOv9 提出 PGI 与 GELAN 以改善梯度与参数利用 18;YOLOv10 以一致双分配与 NMS-free 训练显著降低端到端延迟 19;YOLO11 在易用性与吞吐上延续增强 20。(arXiv)

Transformer 检测器以 DETR 的集合预测去除 NMS 并统一了匹配与优化范式,而 RT-DETR 通过高效混合编码器与查询选择在 T4 上实现百帧级实时且在 COCO 上超越多种 YOLO 变体,为端到端实时检测提供了可行工程路径 21。(arXiv)

工程趋势上,TensorRT 的算子融合/半精度/图优化与 ONNX Runtime 的 8bit 量化共同支撑“训练-导出-加速-评测”的统一流水线,契合边缘端的低功耗与高吞吐需求 5。(NVIDIA Docs)

方法对比表(摘录)

方法 范式/家族 典型数据集 关键改进 优势与局限 代表指标(论文/官方) 适用难点 参考
Faster R-CNN 两阶段/Anchor-based COCO/VOC RPN+共享特征 精度高、延迟大 VGG-16 全流程约 5 FPS 精度优先、非实时 10 (arXiv)
FCOS 一阶段/Anchor-free COCO 每像素回归+中心度 结构简洁、去超参 ResNeXt-101 单尺度 44.7% AP 锚框超参与长尾 11 (arXiv)
CenterNet 一阶段/Center-based COCO 中心点+尺寸回归 端到端、速度优 28.1% AP@142 FPS(COCO) 密集遮挡 12 (arXiv)
PP-YOLOE-L YOLO家族 COCO Anchor-free、ET-Head、TAL 部署友好、TRT 高 FPS 51.4 mAP / 78.1 FPS(V100) 实时、工程化 15 (arXiv)
YOLOX-L YOLO家族 COCO 解耦头、SimOTA 全尺度权衡好 50.0 AP@68.9 FPS(V100) 训练策略复杂 14 (arXiv)
YOLOv7(E6) YOLO家族 COCO 可训练 freebies 同级最优权衡 报告最高 56.8% AP 版本依赖强 16 (arXiv)
RT-DETR-R50 Transformer COCO 混合编码器+查询选择 去 NMS、百帧级实时 53.1% AP @108 FPS(T4) 端到端实时 22 (CVF Open Access)
EfficientDet-D7 单阶段 COCO BiFPN+复合缩放 参数/算力效率高 55.1 AP(test-dev) 大模型推理开销 23 (arXiv)

2.3 要解决的问题及其方案

要解决的问题:(1)检测准确性与时延并重:暴力片段短促且遮挡频繁,需在边缘 GPU/CPU 上实现低时延与高召回 2。(arXiv)(2)环境适应与泛化:弱光、摄像抖动与尺度差异引发分布漂移,易致误检漏检 1。(CJIG)(3)网页端交互的直观与完整:多源输入与参数联动需要稳定的同步双帧与可视化评测闭环 17。(Ultralytics Docs)(4)数据处理效率与安全合规:海量结果需批量导出、可追溯留痕并保障隐私与权限控制 5。(NVIDIA Docs)

对应方案:(1)以 YOLOv10/YOLOv12 方向的 NMS-free 训练思想与轻量骨干为主线,结合多尺度增强与在线蒸馏,兼顾精度与端到端延迟 19。(arXiv)(2)采用 GIoU/CIoU 回归稳定定位,引入弱光/模糊/遮挡增强与迁移学习提升泛化 23。(arXiv)(3)后端 Flask+SocketIO 提供图片/视频/摄像头三源同步双帧推送,前端联动 Conf/IoU/类别筛选与 PR/F1 面板,构成在线评测闭环 17。(Ultralytics Docs)(4)打通 PyTorch→ONNX→TensorRT/ORT 的导出与量化流水线,结合 SQLite/CSV/日志与权限审计,形成可检索、可归档、可追溯的工程闭环 5。(NVIDIA Docs)

2.4 博文贡献与组织结构

本文贡献包括:(1)综合文献综述:围绕“暴力行为实时检测”系统化梳理任务需求、算法范式与部署趋势,并给出方法对比表支撑论述;(2)模型选择与优化:在 YOLOv5–YOLOv12 的统一训练/推理接口下,结合 NMS-free 训练、解耦头与 GIoU/CIoU 等策略形成任务适配配置;(3)美观友好的网页设计:Flask+SocketIO 实现等宽 16:9 双画面对比、视频同步双帧与进度控制,并与阈值/类别筛选联动;(4)效果对比与可复现资源:提供 mAP、F1、PR、训练曲线对比与完整工程/数据链接,便于复现与二次开发。后续章节依次展开网页功能与效果、数据集处理、模型原理与设计、实验结果与分析、系统设计与实现,以及结论与未来工作。


3. 数据集处理

已收到数据集可视化与统计材料(类别热力、x/y/width/height 分布矩阵、样例九宫格)以及数据规模信息:共 8212 张图像,其中训练集 6160 张(≈75.0%)、验证集 1022 张(≈12.4%)、测试集 1030 张(≈12.5%)。本任务为单类别检测,类名为 violence,在中文界面中显示为“暴力倾向”(Chinese_name = {‘violence’: ‘暴力倾向’});标注采用 YOLO 规范的归一化边框格式 ( x , y , w , h ) ∈ [ 0 , 1 ] (x,y,w,h)\in[0,1] (x,y,w,h)[0,1],从提供的散点/直方图可以看出目标中心 x , y x,y x,y 近似集中于画面中轴, y y y 分布在 0.45–0.55 处最为密集,宽度 w w w 呈现“少量大框、主体为中小框”的长尾特性,而高度 h h h 在 0.8–1.0 处有明显峰值,符合监控视角下“纵向整身/半身”框的成像规律。样例图覆盖室内外、白天与弱光等多环境,存在一定遮挡与运动模糊,这些因素共同决定了后续模型需在尺度鲁棒与遮挡容忍上做针对性设计。

Chinese_name = {'violence': "暴力倾向"}

        
在这里插入图片描述

围绕数据组织与统计,博主在不改变您既有划分的前提下,统一固定随机种子为 42 以复现实验;训练/验证/测试三者保持来源独立,避免同一视频或连拍帧跨集合泄漏。根据分布图,数据存在轻微中心偏置与高长宽比样本占比偏高的现象,这意味着网络需要在纵向长框的回归精度与小尺度手部动作的可分性之间取得平衡;同时,单类别设置带来“前景/背景”不均衡,容易出现人形但非暴力动作的误检,因此验证集中建议保留足量“近似但非暴力”的负样本以提高特异性。样例九宫格还提示部分图片存在分辨率不一致、压缩噪声与遮挡块,这些都将在清洗与增强阶段被显式考虑。
在这里插入图片描述

预处理与增强策略方面,为对冲弱光、抖动与遮挡,训练阶段建议采用 HSV/亮度对比度抖动、RandomAffine(旋转±10°、缩放0.8–1.2、轻微剪切)、水平翻转与随机模糊以贴近实际监控退化;结合 Mosaic 与 MixUp 控制在 30–50% 轮次开启、并限制最小目标尺寸以避免过度形变;适量使用 Cutout/随机擦除模拟遮挡,同时配合 IoU 感知的边框过滤保护小目标标签;对单类长尾尺寸,采用多尺度训练(例如 640∼960 的随机缩放)与针对性采样提高中小框出现频率;清洗阶段建议去重相似帧、剔除严重错标或无关画面,统一长宽比至 16:9 并以 letterbox 保持几何一致性。所有类别名称在导出与 Web 端保持中英文双写,确保标注到推理到前端展示的一致性,并在评测脚本中固化阈值与随机种子以保证可复现。


4. 模型原理与设计

本文默认以 YOLOv12 为主线,从“一阶段、Anchor-free、解耦头、可选 NMS-free 训练”的现代检测范式出发,结合轻量多分支主干与跨尺度特征融合实现端到端实时推理。整体思路是以多尺度特征金字塔输出密集候选点,每个候选点同时预测类别置信度与边界框参数,并通过动态样本分配与一致性训练策略降低后处理对时延的影响。主干网络采用可重参数化卷积与浅层大核卷积相结合的设计(训练时多分支、推理时折叠),以较低的参数量覆盖更大的感受野;颈部沿用 PAN/BiFPN 类的自顶向下与自底向上融合,提高对我们数据集中“纵向长框、尺度跨度大”的适配性;检测头采用解耦结构,将分类与回归分别建模,配合 IoU-aware 的目标性分支,缓解暴力/非暴力高相似动作带来的可分性不足。为减轻 NMS 带来的端到端延迟,训练阶段引入 OTA/TAL 风格的动态匹配与一致性分配,推理侧在阈值设置合理时可选择简化或弱化 NMS,使得页面端的实时告警更加稳定。

在结构细节上,注意力模块采用通用 SE/EMA 抑或轻量通道注意力以增强对动作主体的响应,形式为 s = σ ( W 2 , R e L U ( W 1 , G A P ( X ) ) ) s=\sigma(W_2,\mathrm{ReLU}(W_1,\mathrm{GAP}(X))) s=σ(W2,ReLU(W1,GAP(X))),其中 X ∈ R C × H × W X\in\mathbb{R}^{C\times H\times W} XRC×H×W 为特征图、 G A P \mathrm{GAP} GAP 为全局平均池化、 W 1 , W 2 W_1,W_2 W1,W2 为可学习映射、 σ \sigma σ 为 Sigmoid;得到的 s s s 会对通道维进行重标定,从而在复杂背景中凸显前景动作。检测头采用 Anchor-free 中心先验,预测相对当前网格的四个偏移量 ( l , t , r , b ) (l,t,r,b) (l,t,r,b) ( Δ x , Δ y , w , h ) (\Delta x,\Delta y,w,h) (Δx,Δy,w,h),并在不同分辨率特征上共享头部以节省显存。下图给出 YOLO 家族通用结构示意(用于理解主干-颈部-头部的数据流,不限定具体版本实现):

在这里插入图片描述

损失与任务建模方面,分类分支采用带标签平滑的二元交叉熵或 Focal Loss,以缓解易样本主导与单类长尾问题。Focal Loss 写作
F L ( p t ) = − α ( 1 − p t ) γ log ⁡ ( p t ) , \mathrm{FL}(p_t)=-\alpha(1-p_t)^{\gamma}\log(p_t), FL(pt)=α(1pt)γlog(pt),
其中 p t p_t pt 为正负样本下的正确类概率、 α ∈ ( 0 , 1 ) \alpha\in(0,1) α(0,1) 为平衡系数、 γ ≥ 0 \gamma\ge 0 γ0 控制难样本聚焦强度;在我们的单类“暴力倾向”设置中,合理取 γ ∈ [ 1 , 2 ] \gamma\in[1,2] γ[1,2] 可显著提升对“相似但非暴力”负样本的判别。回归分支采用 IoU 家族损失,博主默认使用 CIoU 以兼顾重叠度、中心距离与宽高比一致性:
L ∗ C I o U = 1 − I o U + ρ 2 ( b , b ∗ ) c 2 + α v , v = 4 π 2 ( arctan ⁡ w ∗ h ∗ − arctan ⁡ w h ) 2 , α = v ( 1 − I o U ) + v , \mathcal{L}*{\mathrm{CIoU}}=1-\mathrm{IoU} +\frac{\rho^2(\mathbf{b},\mathbf{b}^{\ast})}{c^2} +\alpha v,\qquad v=\frac{4}{\pi^2}\left(\arctan\frac{w^{\ast}}{h^{\ast}}-\arctan\frac{w}{h}\right)^2,\quad \alpha=\frac{v}{(1-\mathrm{IoU})+v}, LCIoU=1IoU+c2ρ2(b,b)+αv,v=π24(arctanhwarctanhw)2,α=(1IoU)+vv,
其中 b , b ∗ \mathbf{b},\mathbf{b}^{\ast} b,b 为预测与真值框中心, ρ \rho ρ 为欧氏距离, c c c 为包围两框的最小外接矩形对角线长度, w , h w,h w,h w ∗ , h ∗ w^{\ast},h^{\ast} w,h 分别为预测与真值宽高。CIoU 在我们数据里对“纵向高框”收敛更稳定;若需更强形状约束,可替换为 EIoU/α-IoU。匹配策略采用 OTA/TAL 动态 Top-k 选择,综合分类与回归成本矩阵,既提高小目标与被遮挡目标的召回,也为后续“弱 NMS/无 NMS”推理创造条件;蒸馏训练可选用教师-学生的 KL 散度 L ∗ K D = τ 2 , K L ( σ ( z t / τ ) , ∣ , σ ( z s / τ ) ) \mathcal{L}*{\mathrm{KD}}=\tau^2,\mathrm{KL}(\sigma(z_t/\tau),|,\sigma(z_s/\tau)) LKD=τ2,KL(σ(zt/τ),,σ(zs/τ)),其中 z t , z s z_t,z_s zt,zs 为教师与学生的 logits, τ \tau τ 为温度。

训练与正则化策略围绕“实时+鲁棒”目标展开:采用余弦退火学习率与线性 Warmup 稳定前若干轮,使用 EMA 参数影子提升泛化;常规正则包括随机深度与 DropBlock/Dropout(轻量开启),配合多尺度训练与 Mosaic/MixUp 在中后期递减开启比例,以避免对动作细节的破坏。推理侧默认 FP16、张量融合与算子插件加速,前端与后端共享 Conf/IoU 阈值类别映射,保证“页面调参—后端推理—SQLite/CSV 落库”的一致性;视频流采用同步双帧策略与滑动窗口稳定输出,针对我们数据中“中心偏置、尺度跨度大”的统计特征,默认在 3 个尺度输出头上开启软阈值抑制以减少连续帧的抖动框。整体而言,该设计在不牺牲速度的前提下,面向“类间相似、遮挡、尺度变化与弱光”四类难点给出结构与训练的双重对策,并与 Web 端实时可视化/导出流程无缝衔接。


5. 实验结果与分析

本节在 NVIDIA GeForce RTX 3070 Laptop GPU(8GB) 上统一评测,度量包括 Precision/Recall/F1、mAP@0.5、mAP@0.5:0.95,同时统计 预处理/推理/后处理时延 并给出端到端单帧时延(三者求和)。阈值以验证集上 F1–Confidence 曲线的峰值附近为缺省(最佳约在 Conf≈0.15,随后在 0.2–0.3 区间稳定),PR 曲线整体在高召回段缓慢下降,说明在单类设置下分类线索相对充足、主要瓶颈转移到回归质量与遮挡场景。训练过程的损失与指标曲线收敛平稳,50–80 epoch 后进入“缓慢增益”阶段,适合以早停+EMA 固化权重以避免过拟合;混淆矩阵在“背景/暴力”归一化显示上易产生视觉错觉,实际以 PR/F1 指标为准更可靠。
在这里插入图片描述
已补齐第5章的综合对比表(涵盖 n/s 全部模型)。表后附原始精度与时延 CSV,可直接复制保存。

** 表 5-1 暴力行为检测模型综合对比(RTX 3070 Laptop 8GB)**

注:端到端延迟 = PreTime + InfTime + PostTime(ms);指标取测试集表现,四舍五入显示。

Model Params(M) FLOPs(G) Pre(ms) Inf(ms) Post(ms) 端到端(ms) Precision Recall F1 mAP@0.5 mAP@0.5:0.95
YOLOv5nu 2.6 7.7 1.90 7.73 1.31 10.94 0.826 0.885 0.854 0.906 0.640
YOLOv6n 4.3 11.1 2.17 6.78 1.39 10.34 0.836 0.909 0.871 0.905 0.634
YOLOv7-tiny 6.2 13.8 2.28 14.74 4.06 21.08 0.840 0.869 0.854 0.880 0.561
YOLOv8n 3.2 8.7 1.95 6.83 1.39 10.17 0.879 0.903 0.891 0.926 0.679
YOLOv9t 2.0 7.7 1.87 16.51 1.29 19.67 0.878 0.911 0.894 0.924 0.705
YOLOv10n 2.3 6.7 2.08 11.24 0.63 13.95 0.874 0.882 0.878 0.918 0.686
YOLOv11n 2.6 6.5 2.11 9.44 1.42 12.97 0.882 0.910 0.896 0.925 0.705
YOLOv12n 2.6 6.5 1.91 12.47 1.37 15.75 0.849 0.950 0.896 0.916 0.624
YOLOv5su 9.1 24.0 2.28 8.45 1.51 12.24 0.871 0.880 0.876 0.917 0.660
YOLOv6s 17.2 44.2 2.22 8.59 1.45 12.26 0.826 0.831 0.829 0.863 0.591
YOLOv7 36.9 104.7 2.44 23.62 3.46 29.52 0.724 0.729 0.726 0.781 0.486
YOLOv8s 11.2 28.6 2.31 7.66 1.42 11.39 0.891 0.880 0.886 0.936 0.706
YOLOv9s 7.2 26.7 2.12 18.66 1.39 22.17 0.925 0.907 0.916 0.937 0.711
YOLOv10s 7.2 21.6 2.21 11.38 0.60 14.19 0.879 0.897 0.888 0.935 0.720
YOLOv11s 9.4 21.5 2.37 9.74 1.36 13.47 0.915 0.899 0.907 0.942 0.719
YOLOv12s 9.3 21.4 2.09 13.23 1.42 16.74 0.843 0.883 0.862 0.916 0.672

图 5-1 双条形图(n 系列:F1 与 mAP@0.5)
图注:蓝色为 F1,橙色为 mAP@0.5,纵轴归一到 [0,1]。
在这里插入图片描述

图 5-2 双条形图(s 系列:F1 与 mAP@0.5)
图注:同图 5-1,横轴为不同模型。
在这里插入图片描述

总体趋势与结论
(1)n 系列中,YOLOv8n0.9259 mAP@0.5 / 10.17 ms 的组合给出最佳“精度-时延”权衡;若更看重 F1 与 mAP@0.5:0.95 的均衡,YOLOv11n(F1 0.8957 / mAP50-95 0.7047 / 12.97 ms)更稳健;YOLOv7-tiny在本数据上时延与精度均不占优,主要受解耦头与样本分配策略代差影响。
在这里插入图片描述

(2)s 系列整体较 n 系列精度更高,YOLOv11smAP@0.5=0.9417 夺冠,且 mAP@0.5:0.95 最高(0.7185);但就速度而言,YOLOv8s11.39 ms 更适合高并发边缘部署;YOLOv9sF1=0.9158 最佳,但推理延迟(22.17 ms)相对较高。
在这里插入图片描述

(3)从 PR 曲线看,除 YOLOv6s/YOLOv7 外,其余模型在 Recall∈[0.2,0.9] 区间保持 Precision≥0.9,说明“前景/背景”可分性较好,误差主要来自边界框定位与少量极端姿态。
在这里插入图片描述

与任务特性的耦合分析
— 数据统计显示长高比目标占比较大、中心偏置明显,采用 Anchor-free + 解耦头 的系列(v8/9/10/11/12)在纵向长框上的收敛更稳定,配合 CIoU/DFL 在 mAP@0.5:0.95 上更占优;
— 场景存在遮挡与弱光,s 系列在特征容量与跨尺度表征上胜过 n 系列,因此 s 系列更适合固定摄像头+中近距场景,n 系列更适合资源受限或多路并发
— 端到端时延中,后处理(NMS)占比在快速模型中并不高,但在高召回阈值下会放大候选数,建议前端联动 Conf≈0.2、IoU NMS≈0.55 的默认组合,并在视频流上叠加滑动窗口 + 置信度指数平均以抑制抖动。

误检/漏检与改进建议

  1. 相似非暴力动作(如格斗姿势演示、体操/舞蹈)导致的误报:引入“对照负样本”(non-violence actions)并在损失中使用 Focal Loss (γ=1–2) 可有效抑制;
  2. 遮挡与快运动漏检:在训练后段开启 Motion-blur/Random-Erasing多尺度 640–960;推理侧结合 轻量轨迹平滑(Kalman/ByteTrack) 做时域补偿;
  3. 小目标与远距场景:适当提高输入分辨率(如 896),或在部署端启用 TTA(缩放×翻转) 的低开销版本;
  4. 跨设备与跨摄像头:分相机做 阈值校准光照归一化,前端提供每路通道独立的 Conf/IoU 记忆与一键回滚;
  5. 进一步加速:导出 ONNX→TensorRT FP16,n 系列可尝试 INT8 量化(配合校准集),小幅牺牲 mAP 换取更高吞吐。

推荐落地配置

  • 高精度优先:YOLOv11s(Conf 0.2 / IoU 0.55),适合校园出入口与室内走廊;
  • 轻量多路:YOLOv8n(或 YOLOv6n)用于十路以上并发的实时预警;
  • 均衡方案:YOLOv11n 或 YOLOv8s,结合视频端同步双帧缓冲导出 MP4,可在 Web 端实现稳定的毫秒级告警与可追溯导出。

6. 系统设计与实现

6.1 系统设计思路

本系统采用分层解耦的工程框架:表现与交互层(浏览器端)负责多源输入的可视化与参数联动,借助 Flask-SocketIO 建立全双工通道以保障低时延推送;业务与会话管理层在后端统一处理路由、鉴权、节流与会话隔离,维护“项目—模型—会话”的上下文,并将前端的阈值、类别筛选、进度控制映射为可审计的命令序列。推理与任务调度层以“任务队列 + 推理工作者”的形式承载图片、视频与摄像头三类作业,针对视频与摄像头流采用同步双帧缓存与滑动窗口策略,在 GPU 上实现批内融合与半精度推理,后处理产出框、置信度、时间戳等结构化结果。数据持久化层基于 SQLite 进行结果入库、会话与账户管理、导出任务登记与日志落地,并为 Web 端提供轻量统计视图(次数、召回、告警段落)。

实时性与一致性通过三方面保障:其一,SocketIO 信道与REST接口分工明确,前者用于结果推送与进度回传,后者用于模型切换与导出触发;其二,参数同步采用“会话作用域配置 + 原子广播”,在模型热切换时同时刷新类目与阈值面板,避免前后端不一致;其三,视频/摄像头推理采用帧序号与单调时戳绑定,双帧并行且严格对齐,保证叠加轨迹或时间窗平均时无跨帧抖动。为便于扩展,权重管理器支持 YOLOv5–YOLOv12 统一装载与校验,模型资产以元数据登记并按需懒加载;导出子系统集中管理 CSV、带框图片/视频与 MP4 缓冲,支持断点续导与批量下载;统计与审计接口则对告警、参数变更、登录登出与导出操作形成时间线。

在部署形态上,单机 GPU 以进程内线程池满足多路并发,资源受限设备可选择ONNX Runtime / TensorRT 导出的 FP16 或 INT8 引擎以降低延迟;当并发量提升时可将推理工作者拆分为独立进程并通过 Zero-Copy 共享环形缓冲向 Web 层返回可视化帧。所有层次均以“可替换”实现为目标,例如输入适配器可无缝扩展至 RTSP/RTMP,日志与监控接口预留 Prometheus 导出器,便于在生产环境接入统一观测。

图 6-1 系统流程图
图注:系统自初始化与鉴权开始,完成多源输入的预处理、推理与后处理,并通过 SocketIO 将结果与进度同步至浏览器端,同时将结构化记录入库与支持导出。
在这里插入图片描述

图 6-2 系统设计框图
图注:体现四层分工与关键通道;浏览器端承担交互与展示,业务层负责会话与参数同步,推理与调度层承载多源任务与模型热切换,数据层完成持久化、导出与审计。
在这里插入图片描述

6.2 登录与账户管理

在这里插入图片描述

登录流程自“打开登录界面”开始,用户可选择注册新账号或直接登录,也可以以一次性跳过方式进入受限会话;注册时口令经哈希并写入账户表,登录成功后系统载入个性化配置与历史记录,主界面提供概览、检测与导出入口;在任意时刻允许修改资料并持久化设置,注销将销毁会话与本地缓存以防越权,所有关键事件(登录/登出、参数变更、导出)均写入审计日志以便追溯。


代码下载链接

        如果您希望获取博客中提及的完整资源包,包含测试图片、视频、Python文件(*.py)、网页配置文件、训练数据集、代码及界面设计等,可访问博主在面包多平台的上传内容。相关的博客和视频资料提供了所有必要文件的下载链接,以便一键运行。完整资源的预览如下图所示:

在这里插入图片描述

在这里插入图片描述

        资源包中涵盖了你需要的训练测试数据集、训练测试代码、UI界面代码等完整资源➷➷➷

详细介绍文档博客最新YOLO实现的暴力行为实时检测平台(Flask+SocketIO+HTML/CSS/JS)

完整安装运行教程:

        这个项目的运行需要用到Anaconda和Pycharm两个软件,下载到资源代码后,您可以按照以下链接提供的详细安装教程操作即可运行成功,如仍有运行问题可私信博主解决:

  1. Pycharm和Anaconda的安装教程https://deepcode.blog.csdn.net/article/details/136639378

        软件安装好后需要为本项目新建Python环境、安装依赖库,并在Pycharm中设置环境,这几步采用下面的教程可选在线安装(pip install直接在线下载包):

  1. Python环境配置教程https://deepcode.blog.csdn.net/article/details/136639396

7. 结论与未来工作

本文围绕“YOLOv5–YOLOv12 + Flask/SocketIO”的一体化平台,完成了暴力行为的实时检测、可视化与可追溯工程闭环:前端提供等宽 16:9 双画面对比、视频同步双帧与进度控制,后端统一模型装载、三源输入、结构化落库与一键导出;在统一数据与评测规程下,轻量 YOLOv8n 达成 10.17 ms 的端到端延迟与 mAP@0.5=0.926 的优良平衡,YOLOv11s 取得 mAP@0.5=0.942 / mAP@0.5:0.95=0.719 的最高精度,YOLOv9sF1=0.916 在召回/精确权衡上最稳健,验证了本平台在校园与园区场景下对“短时爆发、遮挡、尺度跨度大”的复杂条件具备实时与鲁棒能力。与 Web 侧 Conf/IoU/类别筛选的联动、SQLite/CSV 的跨页共享和溯源导出,共同支撑了从在线告警到事后复核的完整闭环,也为后续边缘部署与多路并发提供了可复制的工程基座。

未来工作将从三条主线推进:其一,模型侧继续探索 NMS-free 训练、蒸馏与结构重参数化,结合 TensorRT/ORT 的 FP16/INT8、稀疏化与剪枝,强化在低功耗设备上的吞吐;引入时序建模与轻量跟踪(例如 Kalman/ByteTrack)以减少抖动与漏检,并尝试多模态(RGB+音频)以提升极端弱光可靠性。其二,系统侧完善 Docker 化与分布式任务队列,支持 WebRTC 超低时延推流、通道级阈值记忆、角色权限与审计、国际化与多租户,并开放 Prometheus 指标与告警策略模板。其三,数据侧建设主动学习与在线评估闭环,面向“相似非暴力动作”持续挖掘难例,推进数据治理、漂移监测与自动重训;同时发布更细粒度的标注协议与评测脚本,便于社区复现与二次开发。总体而言,本平台已在精度、时延与可用性上达到工程落地门槛,具备向更大规模、多场景与更严苛算力约束扩展的可行性。


参考文献(GB/T 7714)

1 刘璐等. 基于深度学习的监控视频异常检测方法综述[J]. 中国图象图形学报, 2024. (中文). (CJIG)
2 Cheng M, Cai K, Li M. RWF-2000: An Open Large Scale Video Database for Violence Detection[EB/OL]. arXiv:1911.05913, 2019. (arXiv)
3 邵延华. 基于深度学习的YOLO目标检测综述[J]. 电子与信息学报, 2022. (中文). (Jeit)
4 Zhao Y, Lv W, Xu S, et al. DETRs Beat YOLOs on Real-time Object Detection[EB/OL]. arXiv:2304.08069, 2023/2024. (arXiv)
5 NVIDIA. TensorRT Documentation[EB/OL]. 2025. (NVIDIA Docs)
6 Microsoft. Quantize ONNX Models — ONNX Runtime Docs[EB/OL]. 2025. (ONNX Runtime)
7 Hassner T, Itcher Y, Kliper-Gross O. Violent Flows: Real-Time Detection of Violent Crowd Behavior[C]//CVPRW, 2012. (Open University)
8 Sultani W, Chen C, Shah M. Real-World Anomaly Detection in Surveillance Videos[C]//CVPR, 2018. (数据集页). (CRCV)
9 Mohamed M. Real-Life Violence Situations Dataset[DB/OL]. 2019–2024. (TIB Service)
10 Ren S, He K, Girshick R, Sun J. Faster R-CNN: Towards Real-Time Object Detection with Region Proposal Networks[EB/OL]. arXiv:1506.01497, 2015. (arXiv)
11 Tian Z, Shen C, Chen H, He T. FCOS: Fully Convolutional One-Stage Object Detection[EB/OL]. arXiv:1904.01355, 2019. (arXiv)
12 Zhou X, Wang D, Krähenbühl P. Objects as Points (CenterNet)[EB/OL]. arXiv:1904.07850, 2019. (arXiv)
13 Lin T-Y, Goyal P, Girshick R, He K, Dollár P. Focal Loss for Dense Object Detection[EB/OL]. arXiv:1708.02002, 2017. (arXiv)
14 Ge Z, Liu S, Wang F, Li Z, Sun J. YOLOX: Exceeding YOLO Series in 2021[EB/OL]. arXiv:2107.08430, 2021. (arXiv)
15 Xu S, Wang X, Lv W, et al. PP-YOLOE: An Evolved Version of YOLO[EB/OL]. arXiv:2203.16250, 2022. (arXiv)
16 Wang C-Y, Bochkovskiy A, Liao H-Y M. YOLOv7: Trainable Bag-of-Freebies Sets New SOTA for Real-time Detectors[EB/OL]. arXiv:2207.02696, 2022. (arXiv)
17 Ultralytics. Explore YOLOv8 — Docs[EB/OL]. 2023–2025. (Ultralytics Docs)
18 Wang C-Y, Yeh I-H, Liao H-Y M. YOLOv9: Learning What You Want Using Programmable Gradient Information[EB/OL]. arXiv:2402.13616 / ECCV 2024. (arXiv)
19 Wang A, Chen H, Liu L, et al. YOLOv10: Real-Time End-to-End Object Detection[EB/OL]. arXiv:2405.14458 / NeurIPS 2024. (arXiv)
20 Ultralytics. YOLO11 — Model Overview[EB/OL]. 2024–2025. (Ultralytics Docs)
21 Carion N, Massa F, Synnaeve G, et al. End-to-End Object Detection with Transformers (DETR)[EB/OL]. arXiv:2005.12872, 2020. (arXiv)
22 Zhao Y, et al. DETRs Beat YOLOs on Real-time Object Detection — CVPR 2024 PDF[EB/OL]. 2024. (CVF Open Access)
23 Tan M, Pang R, Le Q. EfficientDet: Scalable and Efficient Object Detection[EB/OL]. arXiv:1911.09070 / CVPR 2020. (arXiv)
24 Rezatofighi H, et al. Generalized IoU: A Metric and a Loss for Bounding Box Regression[EB/OL]. arXiv:1902.09630 / CVPR 2019;Zheng Z, et al. Distance-IoU Loss…(含 CIoU)[EB/OL]. arXiv:1911.08287 / AAAI 2020. (arXiv)

注:表中指标均直接摘自论文摘要或官方文档,平台/精度定义以各原文为准;若需复现,将在文末工程仓库提供统一评测脚本与日志。

Logo

AtomGit 是由开放原子开源基金会联合 CSDN 等生态伙伴共同推出的新一代开源与人工智能协作平台。平台坚持“开放、中立、公益”的理念,把代码托管、模型共享、数据集托管、智能体开发体验和算力服务整合在一起,为开发者提供从开发、训练到部署的一站式体验。

更多推荐