草庐IT

基于STM32和树莓派的视觉小车开发记录

R_E_M_M_U_S 2023-04-05 原文

前言

        最近小学期接触了STM32,要求开发一个简单的超声波+红外避障+红外循迹的小车。笔者正好手头有一个闲置的树莓派4B和usb摄像头,就想着要不要搞一个简单的上位机,跑跑视觉识别看。

硬件介绍

        先上张图:(请忽略这粗犷的接线,小车不是自己的不敢大改)

 可以看到底层硬件就是淘宝随处可见的小车套件,核心板是STM32F103rct,其他的这里就不赘述

树莓派部分考虑到安全性没有直接从电池引电,而是使用了一个树莓派专用的电源(3.7v 300mAh),测试下了也还能用。

数据传输部分使用USB转TTL模块,摄像头使用了一个usb免驱摄像头,效果也还行,跑简单的识别算法够了。

软件部分

设计思路

        基本的思路就是STM32负责小车的底盘驱动和实现其他传感器的信号处理,树莓派负责处理图像,并给下位机传输运动指令。上、下位机通过UART通信。

底层实现

        底层程序主要是实现PWM调速和USART口的数据收发。关于PWM调速的部分网上的资料也比较全了,这里也就不再赘述,主要贴一下关于数据收发的部分吧。当然因为收发的数据比较简单(通常就是一个字母代表小车的运动),所以这部分程序实际上也比简单。

#ifndef __BLE_COM_H
#define __BLE_COM_H
#include "stm32f10x.h"
 
#define USART2_GPIO_TX_PIN					 GPIO_Pin_2
#define USART2_GPIO_TX_PORT					 GPIOA
#define USART2_GPIO_TX_CLK					 RCC_APB2Periph_GPIOA
 
#define USART2_GPIO_RX_PIN					 GPIO_Pin_3
#define USART2_GPIO_RX_PORT					 GPIOA
#define USART2_GPIO_RX_CLK					 RCC_APB2Periph_GPIOA

#define USART1_GPIO_TX_PIN					 GPIO_Pin_9
#define USART1_GPIO_TX_PORT					 GPIOA
#define USART1_GPIO_TX_CLK					 RCC_APB2Periph_GPIOA
 
#define USART1_GPIO_RX_PIN					 GPIO_Pin_10
#define USART1_GPIO_RX_PORT					 GPIOA
#define USART1_GPIO_RX_CLK					 RCC_APB2Periph_GPIOA
 
#define DEBUG_USARTx_CLK					 RCC_APB2Periph_USART2
 
void USART2_Config(void);   //usart2口初始化
//void USART1_Prg(void);

 
#endif /*__BLE_COM_H*/
#include "BLE_com.h"
char res;


static void USART2_NVIC_Config(void)
{
	NVIC_InitTypeDef NVIC_InitStructure;
	
	NVIC_PriorityGroupConfig(NVIC_PriorityGroup_2);
	
	NVIC_InitStructure.NVIC_IRQChannel = USART2_IRQn;
	NVIC_InitStructure.NVIC_IRQChannelPreemptionPriority = 1;
	NVIC_InitStructure.NVIC_IRQChannelSubPriority = 1;
	NVIC_InitStructure.NVIC_IRQChannelCmd = ENABLE;
	NVIC_Init(&NVIC_InitStructure);
}
 
void USART2_Config(void)
{
	GPIO_InitTypeDef GPIO_InitStructure;
	USART_InitTypeDef USART_InitStructure;
	
	RCC_APB2PeriphClockCmd(RCC_APB2Periph_GPIOA, ENABLE);   //GPIO端口使能
	RCC_APB1PeriphClockCmd(RCC_APB1Periph_USART2, ENABLE);	//串口端口使能
	
	/*TX_GPIO*/
	GPIO_InitStructure.GPIO_Pin = USART2_GPIO_TX_PIN;
	GPIO_InitStructure.GPIO_Mode = GPIO_Mode_AF_PP;
	GPIO_InitStructure.GPIO_Speed = GPIO_Speed_50MHz;
	GPIO_Init(USART2_GPIO_TX_PORT, &GPIO_InitStructure);
	
	/*RX_GPIO*/
	GPIO_InitStructure.GPIO_Pin = USART2_GPIO_RX_PIN;
	GPIO_InitStructure.GPIO_Mode = GPIO_Mode_IN_FLOATING;
	GPIO_InitStructure.GPIO_Speed = GPIO_Speed_50MHz;
	GPIO_Init(USART2_GPIO_RX_PORT, &GPIO_InitStructure);
	
	/*USART3*/
	USART_InitStructure.USART_BaudRate = 9600;
	USART_InitStructure.USART_WordLength = USART_WordLength_8b;
	USART_InitStructure.USART_StopBits = USART_StopBits_1;
	USART_InitStructure.USART_Parity = USART_Parity_No;
	USART_InitStructure.USART_HardwareFlowControl = USART_HardwareFlowControl_None;
	USART_InitStructure.USART_Mode = USART_Mode_Rx | USART_Mode_Tx;
	
	USART_Init(USART2, &USART_InitStructure);
 
  
	
	USART_Cmd(USART2, ENABLE);  //使能串口1
	
	USART_ITConfig(USART2, USART_IT_RXNE, ENABLE);   //开启接收中断
	
	USART2_NVIC_Config();   //中断使能
	
}

void USART2_IRQHandler(void)  
{  
	uint16_t temp;
     while(USART_GetITStatus(USART2,USART_IT_RXNE)!=RESET)
	{  
		temp= USART_ReceiveData(USART2); 	 
		res = temp;

		USART_SendData(USART2,res);     
	} 

}

图像识别部分

        这部分由于开发时间和笔者水平的关系,并没有实现很复杂的功能。主要功能:根据被追踪物(这里用一个绿色瓶盖代替,别问为什么不用其他的,问就是不会)与小车中点的相对位置关系,发出控制小车前进或左、右转的指令。

        图像处理部分使用python 版的opencv,简单易上手。关于如何在树莓派上安装opencv,csdn也有很多博客写到了,这里也不赘述。

        数据传输部分使用了python自带的serial库,实测效果还行,主要在实际测试时要注意发出消息的encode方式,不然可能出现无法正确读取的情况。

import numpy as np  
#import imutils  
import cv2  
import time
import serial#导入串口通信库
ser = serial.Serial()
#设定红色阈值,HSV空间  
redLower = np.array([45, 100, 100])  
redUpper = np.array([90, 255, 255])
font = cv2.FONT_HERSHEY_SIMPLEX
color = (10, 255, 255)

ans = 0

def answer():
    while ans == 0:
        ans = ser.read(1)
    ans = 0

def send(send_data):
    if ser.isOpen():
        ser.write(send_data.encode('utf-8'))#编码
        print("发送成功",send_data)
    else:
        print("发送失败!")


def object_detect():
    #打开摄像头
    camera = cv2.VideoCapture(1)
    #等待两秒
    time.sleep(2)
    #遍历每一帧,检测红色瓶盖
    while True:
    #读取帧
        (ret, frame) = camera.read()
        rows, cols, channels = frame.shape  # 获取图像尺寸
       #判断是否成功打开摄像头
        if not ret:
           print('No Camera')
           break
        #frame = imutils.resize(frame, width=600)
        #转到HSV空间
        hsv = cv2.cvtColor(frame, cv2.COLOR_BGR2HSV)
        #根据阈值构建掩膜
        mask = cv2.inRange(hsv, redLower, redUpper)
        #腐蚀操作
        mask = cv2.erode(mask, None, iterations=2)
        #膨胀操作,其实先腐蚀再膨胀的效果是开运算,去除噪点
        mask = cv2.dilate(mask, None, iterations=2)
        #轮廓检测
        cnts = cv2.findContours(mask.copy(), cv2.RETR_EXTERNAL, cv2.CHAIN_APPROX_SIMPLE)[-2]
        #初始化瓶盖圆形轮廓质心
        center = None
        #如果存在轮廓
        if len(cnts) > 0:
            #找到面积最大的轮廓
            c = max(cnts, key = cv2.contourArea)
            #确定面积最大的轮廓的外接圆
            ((x, y), radius) = cv2.minEnclosingCircle(c)
            #计算轮廓的矩
            M = cv2.moments(c)
            #计算质心
            center = (int(M["m10"]/M["m00"]), int(M["m01"]/M["m00"]))
            #只有当半径大于10时,才执行画图
            if radius > 5:
                cv2.circle(frame, (int(x), int(y)), int(radius), (0, 255, 255), 2)
                cv2.circle(frame, center, 5, (0, 0, 255), -1)
                if (center[0]-cols/2) > 20 :
                    cv2.putText(frame, "turn right", (300, 400), font, 2, color, 3)
                    send('r')
                    answer()

                elif (center[0] - cols / 2) <-20:
                    cv2.putText(frame, "turn left", (300, 400), font, 2, color, 3)
                    send('l')
                else:
                    cv2.putText(frame, "keep_straight", (300, 400), font, 2, color, 3)
                    send('f')

            cv2.imshow('Frame', frame)
             #键盘检测,检测到esc键退出
            k = cv2.waitKey(5)&0xFF
            if k == 27:
                break
    #摄像头释放
    camera.release()
    #销毁所有窗口
    cv2.destroyAllWindows()

def port_open_recv():#对串口的参数进行配置
    ser.port='com3'
    ser.baudrate=9600
    ser.bytesize=8
    ser.stopbits=1
    ser.parity="N"#奇偶校验位
    ser.open()
    if(ser.isOpen()):
        print("串口打开成功!")
    else:
        print("串口打开失败!")

def port_close():
    ser.close()
    if(ser.isOpen()):
        print("串口关闭失败!")
    else:
        print("串口关闭成功!")

if __name__ == '__main__':
    port_open_recv()
    object_detect()

结尾的一些nagging

        这次与SMT32的首次接触还算是一个不错的开始,实现了一个还过得去的功能。STM32为了节省能耗搞得时钟使能一开始着实让人摸不着头脑,但后面适应了感觉也还行。本来想在视觉部分加一个PID控制的,但是由于STM32 USART口16bit的数据传输限制,最终是没有实现(还是太菜了sign)。

有关基于STM32和树莓派的视觉小车开发记录的更多相关文章

  1. ruby - 使用 C 扩展开发 ruby​​gem 时,如何使用 Rspec 在本地进行测试? - 2

    我正在编写一个包含C扩展的gem。通常当我写一个gem时,我会遵循TDD的过程,我会写一个失败的规范,然后处理代码直到它通过,等等......在“ext/mygem/mygem.c”中我的C扩展和在gemspec的“扩展”中配置的有效extconf.rb,如何运行我的规范并仍然加载我的C扩展?当我更改C代码时,我需要采取哪些步骤来重新编译代码?这可能是个愚蠢的问题,但是从我的gem的开发源代码树中输入“bundleinstall”不会构建任何native扩展。当我手动运行rubyext/mygem/extconf.rb时,我确实得到了一个Makefile(在整个项目的根目录中),然后当

  2. Ruby Sinatra 配置用于生产和开发 - 2

    我已经在Sinatra上创建了应用程序,它代表了一个简单的API。我想在生产和开发上进行部署。我想在部署时选择,是开发还是生产,一些方法的逻辑应该改变,这取决于部署类型。是否有任何想法,如何完成以及解决此问题的一些示例。例子:我有代码get'/api/test'doreturn"Itisdev"end但是在部署到生产环境之后我想在运行/api/test之后看到ItisPROD如何实现? 最佳答案 根据SinatraDocumentation:EnvironmentscanbesetthroughtheRACK_ENVenvironm

  3. ruby - 是否可以覆盖 gemfile 进行本地开发? - 2

    我们的git存储库中目前有一个Gemfile。但是,有一个gem我只在我的环境中本地使用(我的团队不使用它)。为了使用它,我必须将它添加到我们的Gemfile中,但每次我checkout到我们的master/dev主分支时,由于与跟踪的gemfile冲突,我必须删除它。我想要的是类似Gemfile.local的东西,它将继承从Gemfile导入的gems,但也允许在那里导入新的gems以供使用只有我的机器。此文件将在.gitignore中被忽略。这可能吗? 最佳答案 设置BUNDLE_GEMFILE环境变量:BUNDLE_GEMFI

  4. ruby - 在 Windows 机器上使用 Ruby 进行开发是否会适得其反? - 2

    这似乎非常适得其反,因为太多的gem会在window上破裂。我一直在处理很多mysql和ruby​​-mysqlgem问题(gem本身发生段错误,一个名为UnixSocket的类显然在Windows机器上不能正常工作,等等)。我只是在浪费时间吗?我应该转向不同的脚本语言吗? 最佳答案 我在Windows上使用Ruby的经验很少,但是当我开始使用Ruby时,我是在Windows上,我的总体印象是它不是Windows原生系统。因此,在主要使用Windows多年之后,开始使用Ruby促使我切换回原来的系统Unix,这次是Linux。Rub

  5. ruby-on-rails - 在 Rails 开发环境中为 .ogv 文件设置 Mime 类型 - 2

    我正在玩HTML5视频并且在ERB中有以下片段:mp4视频从在我的开发环境中运行的服务器很好地流式传输到chrome。然而firefox显示带有海报图像的视频播放器,但带有一个大X。问题似乎是mongrel不确定ogv扩展的mime类型,并且只返回text/plain,如curl所示:$curl-Ihttp://0.0.0.0:3000/pr6.ogvHTTP/1.1200OKConnection:closeDate:Mon,19Apr201012:33:50GMTLast-Modified:Sun,18Apr201012:46:07GMTContent-Type:text/plain

  6. 世界前沿3D开发引擎HOOPS全面讲解——集3D数据读取、3D图形渲染、3D数据发布于一体的全新3D应用开发工具 - 2

    无论您是想搭建桌面端、WEB端或者移动端APP应用,HOOPSPlatform组件都可以为您提供弹性的3D集成架构,同时,由工业领域3D技术专家组成的HOOPS技术团队也能为您提供技术支持服务。如果您的客户期望有一种在多个平台(桌面/WEB/APP,而且某些客户端是“瘦”客户端)快速、方便地将数据接入到3D应用系统的解决方案,并且当访问数据时,在各个平台上的性能和用户体验保持一致,HOOPSPlatform将帮助您完成。利用HOOPSPlatform,您可以开发在任何环境下的3D基础应用架构。HOOPSPlatform可以帮您打造3D创新型产品,HOOPSSDK包含的技术有:快速且准确的CAD

  7. 叮咚买菜基于 Apache Doris 统一 OLAP 引擎的应用实践 - 2

    导读:随着叮咚买菜业务的发展,不同的业务场景对数据分析提出了不同的需求,他们希望引入一款实时OLAP数据库,构建一个灵活的多维实时查询和分析的平台,统一数据的接入和查询方案,解决各业务线对数据高效实时查询和精细化运营的需求。经过调研选型,最终引入ApacheDoris作为最终的OLAP分析引擎,Doris作为核心的OLAP引擎支持复杂地分析操作、提供多维的数据视图,在叮咚买菜数十个业务场景中广泛应用。作者|叮咚买菜资深数据工程师韩青叮咚买菜创立于2017年5月,是一家专注美好食物的创业公司。叮咚买菜专注吃的事业,为满足更多人“想吃什么”而努力,通过美好食材的供应、美好滋味的开发以及美食品牌的孵

  8. 【鸿蒙应用开发系列】- 获取系统设备信息以及版本API兼容调用方式 - 2

    在应用开发中,有时候我们需要获取系统的设备信息,用于数据上报和行为分析。那在鸿蒙系统中,我们应该怎么去获取设备的系统信息呢,比如说获取手机的系统版本号、手机的制造商、手机型号等数据。1、获取方式这里分为两种情况,一种是设备信息的获取,一种是系统信息的获取。1.1、获取设备信息获取设备信息,鸿蒙的SDK包为我们提供了DeviceInfo类,通过该类的一些静态方法,可以获取设备信息,DeviceInfo类的包路径为:ohos.system.DeviceInfo.具体的方法如下:ModifierandTypeMethodDescriptionstatic StringgetAbiList​()Obt

  9. 基于C#实现简易绘图工具【100010177】 - 2

    C#实现简易绘图工具一.引言实验目的:通过制作窗体应用程序(C#画图软件),熟悉基本的窗体设计过程以及控件设计,事件处理等,熟悉使用C#的winform窗体进行绘图的基本步骤,对于面向对象编程有更加深刻的体会.Tutorial任务设计一个具有基本功能的画图软件**·包括简单的新建文件,保存,重新绘图等功能**·实现一些基本图形的绘制,包括铅笔和基本形状等,学习橡皮工具的创建**·设计一个合理舒适的UI界面**注明:你可能需要先了解一些关于winform窗体应用程序绘图的基本知识,以及关于GDI+类和结构的知识二.实验环境Windows系统下的visualstudio2017C#窗体应用程序三.

  10. STM32读取串口传感器数据(颗粒物传感器,主动上传) - 2

    文章目录1.开发板选择*用到的资源2.串口通信(个人理解)3.代码分析(注释比较详细)1.主函数2.串口1配置3.串口2配置以及中断函数4.注意问题5.源码链接1.开发板选择我用的是STM32F103RCT6的板子,不过代码大概在F103系列的板子上都可以运行,我试过在野火103的霸道板上也可以,主要看一下串口对应的引脚一不一样就行了,不一样的就更改一下。*用到的资源keil5软件这里用到了两个串口资源,采集数据一个,串口通信一个,板子对应引脚如下:串口1,TX:PA9,RX:PA10串口2,TX:PA2,RX:PA32.串口通信(个人理解)我就从串口采集传感器数据这个过程说一下我自己的理解,

随机推荐