【动态slam】C++使用yolo模型核心代码学习

发布时间:2026/11/23 1:12:24

【动态slam】C++使用yolo模型核心代码学习 在动态SLAM中只需要调用yolo训练好的模型就可以实现动态目标检测。本文用于总结使用yolo模型的基本逻辑。1加载yolo模型2获取模型输出3后处理4提取检测框一类方法使用TorchScript TorchScript允许在不依赖 Python 解释器的情况下运行模型从而实现模型的跨平台部署和优化。这类方法使用的是.torchscript.pt文件。还有一类方法使用opencv DNN模块调用YOLO模型。这类方法使用的是Darknet架构的YOLO使用的是.cfg和.weights文件。对于slam调用yolo我只在一些比较早的项目与yolov3yolov5结合里看到有用这种方法的。1加载yolo模型在YoloDetect.h里使用torch::jit::script::Module创建module对象用以加载模型。torch::jit::script::Module mModule;YoloDetect.cpp构造函数YoloDetection::YoloDetection() { mModule torch::jit::load(/home/slam/YOLO_ORB_SLAM3/yolov5s.torchscript.pt); std::ifstream f(/home/slam/YOLO_ORB_SLAM3/coco.names); std::string name ; while (std::getline(f, name)) { mClassnames.push_back(name); } mvDynamicNames {person, car, motorbike, bus, train, truck, boat, bird, cat, dog, horse, sheep, crow, bear}; }构造函数主要实现两个功能①加载yolo模型.pt文件②读取包含分类名称的文件coco.names上述代码是用PyTorch C APILibTorch加载.pt文件也有一些项目使用的是darknet架构的yolo可以用opencv的dnn模块加载.weights和.cfg文件。String modelConfiguration src/yolo/yolov3.cfg; String modelWeights src/yolo/yolov3.weights; // Load the network net readNetFromDarknet(modelConfiguration, modelWeights);2获取模型输出在 YoloDetect.cpp中①将图片转换成张量②调用forward函数进行目标检测。③将模型的输出转换为张量②③用以下函数实现torch::Tensor preds mModule.forward({imgTensor}).toTuple()-elements()[0].toTensor();3后处理后处理多采用非极大值抑制的方法删除置信度低或者重叠的检测框。std::vectortorch::Tensor dets YoloDetection::non_max_suppression(preds, 0.4, 0.5);这时候操作的仍然是张量。4提取检测框在 YoloDetect.h中定义一个存储cv::Rect2i对象的数组用于存储动态物体检测框的坐标。Opencv数据类型(二)Rect类和RotatedRect类_cv::rotatedrect-CSDN博客vectorcv::Rect2i mvDynamicArea;上面23中操作的都是张量。在torch中用封装好的Tensor类型表示torch::Tensor preds;在opencv中用多层的矩阵模拟vectorMat outs;其实从OpenCV模拟张量的方式我们就可以看出张量简单说就是一个多维的信息这里是三维、多层的矩阵如图所示。我们不需要深究只需要知道每一维度在这里代表什么。对于一个Tensor张量dets[x][y][z];第一维批次维度表示图像数量通常为 1。第二维预测框维度表示模型生成的所有边界框例如 15120 个预测框。第三维每个预测框包含的值例如坐标、置信度、类别。第一维无需在意因为在这里只处理一张图片。我们需要的信息是①检测框的编号也就是我们需要遍历图片中的每一个检测框。dets[x][y][z];②检测框的坐标和类别信息这个都存储在第三维里。dets[x][y][z];知道了这些如何提取检测框坐标和物体类别就变得很清晰了。float left dets[0][i][0].item().toFloat() * mRGB.cols / 640; float top dets[0][i][1].item().toFloat() * mRGB.rows / 384; float right dets[0][i][2].item().toFloat() * mRGB.cols / 640; float bottom dets[0][i][3].item().toFloat() * mRGB.rows / 384; int classID dets[0][i][5].item().toInt();知道了检测框的坐标存储在对象DetectArea里。cv::Rect2i DetectArea(left, top, (right - left), (bottom - top));经过上述步骤获取了yolo检测到的目标检测框可以用于SLAM的目标检测。
延伸阅读

更多相关文章

2026/11/15 4:21:23

AI绘画提示词案例去哪找

AI绘画提示词案例去哪找 找 AI 绘画提示词,最怕只看到一句「赛博朋克」却没有整段提示词,也没有效果图。案例这一层我去 Gen Feeds(https://genfeeds.com/)的 Prompt 灵感库,地址是 https://genfeeds.com/prompts 。每…

2026/11/23 1:07:32

襄阳襄州区考电工证网上查询靠谱吗?别再被中介坑了

襄阳襄州区考电工证网上查询靠谱吗?别再被中介坑了 不知道去哪报名怕被中介坑?襄阳襄州区考电工证网上查询成了很多人的选择,但你真的了解这个流程吗?本文帮你扒一扒真实情况,避开那些隐藏的坑。 一、襄阳襄州区考电工证的报考流程与网上查询技巧…

2026/11/23 1:07:32

宁波电工证复审培训实操考试考什么?学历不高怕报不上名的看过来

宁波电工证复审培训实操考试考什么?学历不高怕报不上名的看过来 你是不是也这样,学历不高,担心自己连报名宁波电工证复审培训的资格都没有?别急,今天咱们就来聊聊这个“上岗必备”的电工证复审流程,让你知道,其实只要准备到位,学历不高也能顺利拿到证…

2026/11/23 1:07:32

关于电工证考核认证电子证书怎么考更省事

关于电工证考核认证电子证书怎么考更省事 你是不是也在为找工作发愁,手里没有电工证?别急,今天就给你讲讲怎么顺利考到电工证,拿到 电子证书 ,顺利上岗。别再为没证而耽误机会了,下面的内容都是过来人总结的干货,看完直接上手。…

2026/11/23 1:07:32

社会电工证初级怎么考,考前押题能帮你少走弯路

社会电工证初级怎么考,考前押题能帮你少走弯路 怕考不过白交培训费?社会电工证初级怎么考,其实没有你想象中那么难,关键是要掌握对的方法。很多学员最怕的就是交了钱,结果考试不过,白忙一场。如果你正在考虑报考社会电工证初级,那你一定要知道考前押题…

2026/11/23 1:02:31

维修电工证是哪里办理 郑州报考避坑指南

维修电工证是哪里办理 郑州报考避坑指南 怕考不过白交培训费?很多郑州小伙伴在报考维修电工证时,总担心花了钱还考不上,白白浪费时间和金钱。尤其是像我们这种在鹤壁房建工程干的,维修电工证不是可有可无,而是必须有的硬性要求。别急,这篇文章带你从零…

2026/11/22 0:09:40

高压电工证还能年审吗良心建议来了,学历不高也能考!

高压电工证还能年审吗良心建议来了,学历不高也能考! 你是不是也担心,自己学历不高,根本报不上高压电工证?其实不然,现在政策已经非常明确, 高压电工证还能年审 ,而且只要符合条件, 学历不是门槛 , 良心建议…

2026/11/22 0:09:40

吴江的电工证免费培训怎么报名?官方报名入口全解析

吴江的电工证免费培训怎么报名?官方报名入口全解析 你急需特种作业证才能上岗找工作,但不知道从哪里下手?别急,现在就给你讲明白【吴江的电工证免费培训】到底怎么操作,以及怎么通过 官方报名入口…

2026/11/23 0:26:19

电工证复审肃州区的真实经历:别被中介坑了,自己搞定更靠谱

电工证复审肃州区的真实经历:别被中介坑了,自己搞定更靠谱 不知道去哪报名怕被中介坑?这几乎是每个需要办理或复审电工证的人的真实经历。尤其在肃州区,信息不透明、流程复杂、中介收费高又不靠谱,让很多电工从业者感到头疼。作为一个在应急管理和特种作…

2026/11/23 0:01:38

南宁哪里可以学电工证值不值得考?怕被中介坑?看这篇就够了

南宁哪里可以学电工证值不值得考?怕被中介坑?看这篇就够了 不知道去哪报名怕被中介坑?南宁哪里可以学电工证值不值得考?这是很多想考电工证的朋友最关心的问题。现实中,不少人在选择培训机构时被各种五花八门的广告信息搞得晕头转向,甚至被坑了钱还没拿…

2026/11/23 0:01:38

建设局特种工证怎么查全国通用的复审流程

建设局特种工证怎么查全国通用的复审流程 证书过期了不知道怎么复审延期,这是很多特种作业从业者常遇到的问题。尤其是在洛阳涧西区从事水利工程工作的你,特种作业操作证不仅是上岗的“通行证”,更是保障安全作业的法律底线。如果操作证过期了,不仅影响工…

2026/11/23 0:01:38

电工证跨考政策值不值得考?学历不高也能考的真相

电工证跨考政策值不值得考?学历不高也能考的真相 你是不是也觉得学历不够,报电工证怕被拒?别急,国家安全生产考试网明文规定, 电工证跨考政策 对学历门槛没有硬性限制,只要你年满18岁,身体健康,能通过实操考试,就能报考。关键是, 值不值得考…

2026/11/22 9:39:14

面向复杂光照与角度的宠物面部识别鲁棒性增强策略

在智慧养宠时代,基于视觉的宠物身份识别技术正逐步从实验室走向家庭应用。然而,与配合度高的人类不同,宠物是典型的“非合作生物识别对象”——它们不会主动配合摄像头调整姿态,更无法控制光照环境。实际应用中,我们常…

2026/11/22 5:39:03

SSM电子书店源码全解析:结构、原理、部署与排错实战

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

还想了解更多?直接咨询顾问

免费诊断 + 免费方案 + 透明报价。

全国咨询热线400-8866-253
免费获取方案
☎咨询二维码 ☎ ↑