当前位置: 首页 > news >正文

基于深度学习的汽车自动驾驶目标检测系统演示与介绍(YOLOv12/v11/v8/v5模型+Pyqt5界面+训练代码+数据集)

视频演示

基于深度学习的汽车自动驾驶目标检测系统

1. 前言​

目前铁路铁轨巡检主要依赖人工目测,存在效率低、漏检率高及受主观因素影响大等弊端,难以满足现代铁路的高安全性需求。为此,本文提出基于YOLO深度学习算法的解决方案,通过构建专用数据集训练模型,并开发图形化界面(GUI)将算法工程化,旨在用机器视觉替代人工,实现铁轨缺陷的自动化、智能化识别,解决传统检测方式的痛点。

本系统集成了多元化的检测模式与智能化辅助功能,支持图片、视频、摄像头及批量文件夹检测。系统界面清晰直观,具备实时参数显示、语音报警及数据导出(图片/视频/Excel)功能,并设有用户登录验证机制,为铁轨缺陷检测提供了一套集检测、分析与管理于一体的高效、便捷的综合解决方案。

2. 项目演示

2.1 用户登录界面

登录界面布局简洁清晰,左侧展示系统主题,用户需输入用户名、密码及验证码完成身份验证后登录系统。

3

2.2 新用户注册

注册时可自定义用户名与密码,支持上传个人头像;如未上传,系统将自动使用默认头像完成账号创建。

ScreenShot_2025-12-12_145137_139

2.3 主界面布局

主界面采用三栏结构,左侧为功能操作区,中间用于展示检测画面,右侧呈现目标详细信息,布局合理,交互流畅。

2

2.4 个人信息管理

用户可在此模块中修改密码或更换头像,个人信息支持随时更新与保存。

ScreenShot_2025-12-12_145210_109

2.5 多模态检测展示

系统支持图片、视频及摄像头实时画面的目标检测。识别结果将在画面中标注显示,并且带有语音播报提醒,并在下方列表中逐项列出。点击具体目标可查看其类别、置信度及位置坐标等详细信息。

1

2.6 检测结果保存

可以将检测后的图片、视频进行保存,生成新的图片和视频,新生成的图片和视频中会带有检测结果的标注信息,并且还可以将所有检测结果的数据信息保存到excel中进行,方便查看检测结果。

  ScreenShot_2026-01-04_174547_306

ScreenShot_2026-01-04_174614_808

2.7 多模型切换

系统内置多种已训练模型,用户可根据实际需求灵活切换,以适应不同检测场景或对比识别效果。

ScreenShot_2025-12-12_141818_688

3.模型训练核心代码

本脚本是YOLO模型批量训练工具,可自动修正数据集路径为绝对路径,从pretrained文件夹加载预训练模型,按设定参数(100轮/640尺寸/批次8)一键批量训练YOLOv5nu/v8n/v11n/v12n模型。

# -*- coding: utf-8 -*-
"""
该脚本用于执行YOLO模型的训练。它会自动处理以下任务:
1. 动态修改数据集配置文件 (data.yaml),将相对路径更新为绝对路径,以确保训练时能正确找到数据。
2. 从 'pretrained' 文件夹加载指定的预训练模型。
3. 使用预设的参数(如epochs, imgsz, batch)启动训练过程。要开始训练,只需直接运行此脚本。
"""
import os
import yaml
from pathlib import Path
from ultralytics import YOLOdef main():"""主训练函数。该函数负责执行YOLO模型的训练流程,包括:1. 配置预训练模型。2. 动态修改数据集的YAML配置文件,确保路径为绝对路径。3. 加载预训练模型。4. 使用指定参数开始训练。"""# --- 1. 配置模型和路径 ---# 要训练的模型列表models_to_train = [{'name': 'yolov5nu.pt', 'train_name': 'train_yolov5nu'},{'name': 'yolov8n.pt', 'train_name': 'train_yolov8n'},{'name': 'yolo11n.pt', 'train_name': 'train_yolo11n'},{'name': 'yolo12n.pt', 'train_name': 'train_yolo12n'}]# 获取当前工作目录的绝对路径,以避免相对路径带来的问题current_dir = os.path.abspath(os.getcwd())# --- 2. 动态配置数据集YAML文件 ---# 构建数据集yaml文件的绝对路径data_yaml_path = os.path.join(current_dir, 'train_data', 'data.yaml')# 读取原始yaml文件内容with open(data_yaml_path, 'r', encoding='utf-8') as f:data_config = yaml.safe_load(f)# 将yaml文件中的 'path' 字段修改为数据集目录的绝对路径# 这是为了确保ultralytics库能正确定位到训练、验证和测试集data_config['path'] = os.path.join(current_dir, 'train_data')# 将修改后的配置写回yaml文件with open(data_yaml_path, 'w', encoding='utf-8') as f:yaml.dump(data_config, f, default_flow_style=False, allow_unicode=True)# --- 3. 循环训练每个模型 ---for model_info in models_to_train:model_name = model_info['name']train_name = model_info['train_name']print(f"\n{'='*60}")print(f"开始训练模型: {model_name}")print(f"训练名称: {train_name}")print(f"{'='*60}")# 构建预训练模型的完整路径pretrained_model_path = os.path.join(current_dir, 'pretrained', model_name)if not os.path.exists(pretrained_model_path):print(f"警告: 预训练模型文件不存在: {pretrained_model_path}")print(f"跳过模型 {model_name} 的训练")continuetry:# 加载指定的预训练模型model = YOLO(pretrained_model_path)# --- 4. 开始训练 ---print(f"开始训练 {model_name}...")# 调用train方法开始训练model.train(data=data_yaml_path,  # 数据集配置文件epochs=100,           # 训练轮次imgsz=640,            # 输入图像尺寸batch=8,             # 每批次的图像数量name=train_name,      # 模型名称)print(f"{model_name} 训练完成!")except Exception as e:print(f"训练 {model_name} 时出现错误: {str(e)}")print(f"跳过模型 {model_name},继续训练下一个模型")continueprint(f"\n{'='*60}")print("所有模型训练完成!")print(f"{'='*60}")if __name__ == "__main__":# 当该脚本被直接执行时,调用main函数main()

4. 技术栈

  • 语言:Python 3.10

  • 前端界面:PyQt5

  • 数据库:SQLite(存储用户信息)

  • 模型:YOLOv5、YOLOv8、YOLOv11、YOLOv12

5. YOLO模型对比与识别效果解析

5.1 YOLOv5/YOLOv8/YOLOv11/YOLOv12模型对比

基于Ultralytics官方COCO数据集训练结果:

模型

尺寸(像素)

mAPval 50-95

速度(CPU ONNX/毫秒)

参数(M)

FLOPs(B)

YOLO12n

640

40.6

-

2.6

6.5

YOLO11n

640

39.5

56.1 ± 0.8

2.6

6.5

YOLOv8n

640

37.3

80.4

3.2

8.7

YOLOv5nu

640

34.3

73.6

2.6

7.7

关键结论

  1. 精度最高:YOLO12n(mAP 40.6%),显著领先其他模型(较YOLOv5nu高约6.3个百分点);

  2. 速度最优:YOLO11n(CPU推理56.1ms),比YOLOv8n快42%,适合实时轻量部署;

  3. 效率均衡:YOLO12n/YOLO11n/YOLOv8n/YOLOv5nu参数量均为2.6M,FLOPs较低(YOLO12n/11n仅6.5B);YOLOv8n参数量(3.2M)与计算量(8.7B)最高,但精度优势不明显。

综合推荐

  • 追求高精度:优先选YOLO12n(精度与效率兼顾);

  • 需高速低耗:选YOLO11n(速度最快且精度接近YOLO12n);

  • YOLOv5nu/YOLOv8n因性能劣势,无特殊需求时不建议首选。

5.2 数据集分析

labels

数据集中训练集和验证集一共7000张图片,数据集目标类别两种:正常肾脏,肾结石数据集配置代码如下:

names:0: car1: van2: truck3: pedestrian4: Person_sitting5: cyclist6: tram7: misc
path: D:\project\python\yolo_Object_Detection_for_Autonomous_Driving\train_data
train: train
val: val

train_batch0train_batch1 

上面的图片就是部分样本集训练中经过数据增强后的效果标注。

5.3 训练结果

confusion_matrix_normalized

混淆矩阵显示中识别精准度显示是一条对角线,方块颜色越深代表对应的类别识别的精准度越高

BoxF1_curve

F1指数(F1 Score)是统计学和机器学习中用于评估分类模型性能的核心指标,综合了模型的精确率(Precision)和召回率(Recall),通过调和平均数平衡两者的表现。 

当置信度为0.455时,所有类别的综合F1值达到了0.85(蓝色曲线)。

BoxPR_curve

mAP@0.5:是目标检测任务中常用的评估指标,表示在交并比(IoU)阈值为0.5时计算的平均精度均值(mAP)。其核心含义是:只有当预测框与真实框的重叠面积(IoU)≥50%时,才认为检测结果正确。

图中可以看到综合mAP@0.5达到了0.886(88.6%),准确率非常高。

6. 源码获取方式

源码获取方式:https://www.bilibili.com/video/BV1JLmqB9Edj

http://www.jsqmd.com/news/194139/

相关文章:

  • 数据治理与AI融合:AI用数智能体驱动治理效率跃迁
  • 2026年成都气体厂家实力榜:聚焦氧气气体/氮气气体/乙炔气/氦气/二氧化碳气体/高纯氧气/高纯氮气/高纯氩气/高纯氦气/特种气体/工业气体核心技术与市场竞争力 - 海棠依旧大
  • 2026 全国五大阀门生产厂家盘点:从民生到核电的 “流体控制中枢” - 品牌推荐排行榜
  • 【风电功率预测】【多变量输入单步预测】基于CNN-BiLSTM-Attention的风电功率预测研究(Matlab代码实现)
  • 简单理解:XT_QSPIx 和 DMA_CFG_INFO是什么关系?
  • AI主播声音定制:利用GLM-TTS克隆特定人声案例分享
  • 简单理解:“+4 字节冗余 ” 是兼容命令 / 地址前缀、避免 DMA 溢出、满足对齐要求,是实战经验的体现
  • 低代码平台插件设计:使非技术人员也能使用GLM-TTS
  • GLM-TTS模型本地部署指南:Docker镜像与conda环境配置
  • 聚碳酸酯墙板新选择:隔音隔热 + 安装便捷(墙体应用/工程案例) - 品牌排行榜
  • 空间蛋白质组研究必看!手把手教你ROI选区思路
  • 2025废旧物资回收榜单推荐:废旧物资出售/废旧物资招标/废旧物资处理源头服务商精选 - 品牌推荐官
  • 2026西安单位搬迁找哪个搬家公司好?长短途、同城跨城搬家公司top5推荐 - 深度智识库
  • 实测五款AI生成PPT工具,这款国产软件在实际工作中确实好用
  • 【鲁棒优化、大M法、CCG算法】计及风、光、负荷不确定性两阶段鲁棒优化(Matlab代码实现)
  • 使用Mathtype公式转语音?探索GLM-TTS在学术领域的应用
  • 【课程设计/毕业设计】基于机器学习CNN的手势识别技术研究与游戏应用实现
  • 聚碳酸酯板行业标杆:国标GB/T44570主导编制(技术引领) - 品牌排行榜
  • 基于GLM-TTS构建企业级语音系统:API对接与二次开发建议
  • Vertgrow Ai销冠:全面提升销售效率的AI驱动销售平台
  • 负载均衡策略设计:支撑高并发TTS请求的架构方案
  • 安装linux系统,什么情况下/usr和/var和/var/lib需要单独分区
  • 解析 ‘Adversarial Prompting in Graphs’:如何防止恶意用户通过输入诱导 Agent 绕过审批节点?
  • 浏览器兼容性检测:确保GLM-TTS WebUI在各主流浏览器正常显示
  • 【拯救HMI】工业HMI数据架构设计:遵循IEC标准,构建清晰、可维护的数据基石
  • GLM-TTS依赖环境配置:Miniconda虚拟环境激活步骤详解
  • 从GitHub下载GLM-TTS源码后如何快速部署?完整流程演示
  • 语音数据隐私保护:GLM-TTS处理敏感信息的安全措施
  • GLM-TTS命令行模式使用教程:脱离Web界面进行推理
  • 邯郸