前提:本篇文章重在分享自己的心得与感悟,我们把最重要的部分,摄像头循迹,摄像头数字识别问题都解决了,有两种方案一种是openARTmini摄像头进行数字识别加寻迹,即融合代码。另一种是使用openmv4进行数字识别(使用的是模板匹配),然后利用灰度传感器进行寻迹。因为当时python用得不算很熟,最终我们选择了第二种方案使open MV4实现数字识别,灰度传感器寻迹,在控制智能车运动调试的过程中更加简单。当然赛后我们也尝试了使用open ARTmini的方案,同样操作容易。其次我们下来也做了方案三K210数字识别,数字识别率可达97.8%,使用openmv寻迹。

人们常常希望向成功者获取经验,可是生活中哪有那么多成功者,我想只有失败者才最有发言权,最有经验可以分享吧。因为某些原因我们无缘国奖,但我不甘是失败者,我们为此付出了多少,坚持了多少,只有我们自己知道,只要全力以赴就无所谓失败,也许多年后再回过头来看,想起来这些热血我依然能够热泪盈眶,那就无悔了。
追求卓越,成功才会在不经意见追上你!
目录:
一、题目分析
二、分工以及小车的搭建
三、摄像头部分
四、控制部分
五、联调
六、随谈
七、工程代码
备注:
只需要工程代码的同学(如下是此次电赛过程中所有的代码),建议先看完正文
openMV4模板匹配数字识别方案,本次电赛所有工程代码包括论文报告
https://download.csdn.net/download/cubejava/79012510
openmv巡线代码:
https://download.csdn.net/download/cubejava/41873305
stm32HAL库keil工程(配置freeRTOS,巡线,自动返回,定点停车):
https://download.csdn.net/download/cubejava/41871669
openARTmini巡线和数字识别的融合代码:
https://download.csdn.net/download/cubejava/79012645
小车底板AD原理图和pcb工程:
https://download.csdn.net/download/cubejava/42512528
(可私聊提供技术支持,代码注释完善,若有不懂的可手把手教学)




我们是做测控方向的,当时在4号早上7:30左右题目就出来了,随即就有人发在了群里。
看了一下测控方向除了无人机能选的也就D题和F题了,D题是基于互联网的摄像测量系统(D题),我们对这方面的了解不多,没有什么把握,就没敢选,后来听说选D题的在GitHub上能够找到源码,做到后面车调不动时倒有点小后悔,哈哈。
F题经典小车题目,但与往年不同的是今年识别和控制都是重点,必须要先能做到识别,你才能谈接下来的循迹和运动控制。
谈到识别就需要用到摄像头,但之前我们对于摄像头并没有太重视,循迹一般用的都是红外对管,灰度传感器,或者线性CCD就足够了,但是这次的赛到元素存在十字,黑白色块,还要求能自动返回,使用普通的循迹模块就比较吃力了。在电赛备赛期间就做过线性CCD寻迹的智能车,使用的stm32f4,HAL库,cube MX配置的。采取了二值化,动态阈值算法,将CCD采集的值滤波,导入PID,再加入速度环,实现串级PID。也算是练了练手。

工程链接:https://download.csdn.net/download/cubejava/79012959
我们组三人都没有玩过摄像头,要立马开始现学,我们一开始准备使用openmv进行循迹和数字识别,后来发现我们的openmv的版本不能训练神经网络,必须要openmvplus(可是没有,买又来不急送到),就很难受。
于是我们想采用openARTMiNi进行数字识别加循迹,但由于python用得不熟,当时没有足够的把握能够实现。所以我们采取了折中的办法,即文章开头说的,openMV使用模板匹配识别数字,寻迹使用灰度传感器。
其中一位学长着手完成openMV模板匹配识别数字,另和我则负责stm32f4的工程创建小车的底层代码和运动控制,使用的HAL库。
由于之前备赛准备的东西比较充分,所以当天上午就把车给搭建好了,使用平衡小车,加了一个万向轮,转弯差速控制。

小车硬件:
STM32F411CEU6,TB6612,车模(自带霍尔编码器减速电机),LM2596,MPU6050,航模电池,openMV,K210
使用AD画小车底板。原理图和PCB如下


小车软件:
使用的HAL库建立工程,在cubeMX中配置freeRTOS操作系统,

KEIL工程程序代码:

串口重定向printf
/*串口重定向printf*/
int fputc(int ch, FILE *f)
{
HAL_UART_Transmit(&huart6, (uint8_t *)&ch, 1, 1000);
return ch;
}
编码器模式取值
/*编码器模式取值*/
int Read_Encoder(uint8_t TIMX)
{
int Encoder_TIM;
switch(TIMX)
{
case 1: Encoder_TIM= (short)TIM1 -> CNT; TIM1 -> CNT=0;break;
case 2: Encoder_TIM= (short)TIM2 -> CNT; TIM2 -> CNT=0;break;
default: Encoder_TIM=0;
}
return Encoder_TIM;
}
判断mpu6050初始化是否成功
void Mpu6050_Init()
{
while(w_mpu_init() != mpu_ok)
{
printf("0x%x (ID_ERROR)\r\n", w_mpu_init());
HAL_Delay(10);
}
/*DMP初始化*/
dmp_init();
}
初始化程序
int main(void)
{
/*开启编码器计数*/
HAL_TIM_Encoder_Start(&htim1, TIM_CHANNEL_ALL);
HAL_TIM_Encoder_Start(&htim2, TIM_CHANNEL_ALL);
/*开启电机PWM输出*/
HAL_TIM_PWM_Start(&htim3,TIM_CHANNEL_1);
HAL_TIM_PWM_Start(&htim3,TIM_CHANNEL_2);
/*开启舵机的PWM输出*/
HAL_TIM_PWM_Start(&htim5,TIM_CHANNEL_3);
HAL_TIM_PWM_Start(&htim5,TIM_CHANNEL_4);
/*Enable the USART1 Interrupt*/
HAL_UART_Receive_IT(&huart1,(uint8_t *)&usart6_rxbuff,1);
/*临时*/
Temporary();
Mpu6050_Init();
/*使能定时器4中断*/
HAL_TIM_Base_Start_IT(&htim4);
HAL_UART_Transmit(&huart6, (uint8_t *)&cc, 1,0xFFF);
// TIM3 ->CCR1 = 400;
// TIM3 ->CCR2 = 400;
/* USER CODE END 2 */
/* Call init function for freertos objects (in freertos.c) */
MX_FREERTOS_Init();
HAL_UART_Transmit(&huart6, (uint8_t *)&cc, 1,0xFFF);
/* Start scheduler */
osKernelStart();
while (1)
{
/* USER CODE END WHILE */
// printf("-------------\r\n");
// HAL_Delay(500);
/* USER CODE BEGIN 3 */
}
/* USER CODE END 3 */
}
freeRTOS.C文件中的代码

巡线和功能实现代码均放在freeRTOS.C中

有关摄像头部分,我们在第一天尝试过单使用openMV寻迹,但神经网络训练不了就弃置了。
在openmv中处理好数据,可以寻红线,识别十字,识别黑白色块,
传回来的数据:
左右线传回为模拟量,传入单片机,进行pid控制

openMV模板匹配识别数字:

可实现一排识别多个数字。


控制部分,巡线使用的PD控制
首先速度闭环,PI控制,让小车保持在一个稳定的速度

在速度环上叠加一层方向环,PD控制,巡线

int track_control(float collect_openmv)
{
static float last_bias,Bias,kp=0.75,Kd=0.25;//0.5的效果还行
float Turn;
Bias=-(collect_openmv-60);
Turn=-Bias*kp-Kd*(Bias-last_bias);
last_bias = Bias;
//printf("\r\nt:%.1f\r\n",Turn);
return Turn;
}
小车的自动返回,和判定十字转弯,黑白色块停车使用了标志位,定义数组,根据出栈入栈原理,记录去回的方向。

openmv和K210的数据传入单片机
打开串口中断,注意需要写好摄像头和单片机之间的通信协议,如下:

void HAL_UART_RxCpltCallback(UART_HandleTypeDef *huart) //串口中断,遥控部分。
{
uint16_t tem;
if(huart->Instance == USART1) // 判断是由哪个串口触发的中断
{
//printf("ok");
tem = usart6_rxbuff;
printf("%x\r\n",tem);
if(RxState==0&&tem==0x79)
{
RxState=1;
RxBuffer1[RxCounter1++]=tem;
}
else if(RxState==1)
{
RxBuffer1[RxCounter1++]=tem;
if(RxCounter1>=10||tem == 0x85) //RxBuffer1接受满了,接收数据结束
{
RxState=2;
}
}
else if(RxState==2) //检测是否接受到结束标志
{
if(RxBuffer1[RxCounter1-1] == 0x85)
{
if(RxBuffer1[1] == 0xaa)//识别
{
Flag = Flag + 1;
JG=RxBuffer1[RxCounter1-2];
Turn = RxBuffer1[RxCounter1-3];
if(Flag>3)
{
if(JG>0&&FS==0) {FS = JG;}
printf("\r\n Turn:%d FS:%d \r\n",Turn,FS);
}
}
if(RxBuffer1[1] == 0xbb)//搜线
{
printf("\r\n___sou xian___\r\n");
printf("\r\n Cx:%d, STOP:%d \r\n",Cx,STOP);
Cx=RxBuffer1[RxCounter1-2];
STOP=RxBuffer1[RxCounter1-3];
}
RxCounter1 = 0;
RxState = 0;
}
else //接收错误
{
RxState = 0;
RxCounter1=0;
for(i=0;i<10;i++)
{
RxBuffer1[i]=0x00; //将存放数据数组清零
}
printf("接收错误\r\n");
}
}
if(state==2)
{
if(STOP == 0)
{
state = 0;
}
}
if(state==4)
{
if(STOP == 0)
{
state = 0;
}
}
}
HAL_UART_Receive_IT(&huart1, (uint8_t *)&usart6_rxbuff, 1);
}


我们是在结束的前一天晚上完成好的数字识别,离调车整个程序的逻辑就只有一天的时间,说真的,程序写少了,这个程序逻辑真的很难想出来,尤其是在当时已经连续三天每天只睡2个小时左右,头脑非常混沌,呆滞。
还是要多写程序,练习自己写程序的逻辑思维。
结尾:第一次参加国赛,也是第一次参加电赛,本来应该是大一结束就开始了的,电赛延期拖到了大二开学后的一段时间,自己需要学的内容还有很多,好好学习,提升自己的技术,明年省赛继续冲!
openMV4模板匹配数字识别方案,本次电赛所有工程代码包括论文报告
https://download.csdn.net/download/cubejava/79012510
openmv巡线代码:
https://download.csdn.net/download/cubejava/41873305
stm32HAL库keil工程(配置freeRTOS,巡线,自动返回,定点停车):
https://download.csdn.net/download/cubejava/41871669
openARTmini巡线和数字识别的融合代码:
https://download.csdn.net/download/cubejava/79012645
小车底板AD原理图和pcb工程:
https://download.csdn.net/download/cubejava/42512528
备注:这些都是我们没日没夜熬出来的程序代码,花费了很多精力,所以没有免费开源(望理解),设置了付费,不过在博客里也写了相关的思路,可以参考借鉴一些经验,来年省赛加油!!!
现在电赛越来越趋向于视觉和人工智能了,一定要好好学习摄像头,视觉,神经网络。
很好奇,就使用rubyonrails自动化单元测试而言,你们正在做什么?您是否创建了一个脚本来在cron中运行rake作业并将结果邮寄给您?git中的预提交Hook?只是手动调用?我完全理解测试,但想知道在错误发生之前捕获错误的最佳实践是什么。让我们理所当然地认为测试本身是完美无缺的,并且可以正常工作。下一步是什么以确保他们在正确的时间将可能有害的结果传达给您? 最佳答案 不确定您到底想听什么,但是有几个级别的自动代码库控制:在处理某项功能时,您可以使用类似autotest的内容获得关于哪些有效,哪些无效的即时反馈。要确保您的提
为什么4.1%2返回0.0999999999999996?但是4.2%2==0.2。 最佳答案 参见此处:WhatEveryProgrammerShouldKnowAboutFloating-PointArithmetic实数是无限的。计算机使用的位数有限(今天是32位、64位)。因此计算机进行的浮点运算不能代表所有的实数。0.1是这些数字之一。请注意,这不是与Ruby相关的问题,而是与所有编程语言相关的问题,因为它来自计算机表示实数的方式。 关于ruby-为什么4.1%2使用Ruby返
我收到这个错误:RuntimeError(自动加载常量Apps时检测到循环依赖当我使用多线程时。下面是我的代码。为什么会这样?我尝试多线程的原因是因为我正在编写一个HTML抓取应用程序。对Nokogiri::HTML(open())的调用是一个同步阻塞调用,需要1秒才能返回,我有100,000多个页面要访问,所以我试图运行多个线程来解决这个问题。有更好的方法吗?classToolsController0)app.website=array.join(',')putsapp.websiteelseapp.website="NONE"endapp.saveapps=Apps.order("
我有一个包含多个键的散列和一个字符串,该字符串不包含散列中的任何键或包含一个键。h={"k1"=>"v1","k2"=>"v2","k3"=>"v3"}s="thisisanexamplestringthatmightoccurwithakeysomewhereinthestringk1(withspecialcharacterslike(^&*$#@!^&&*))"检查s是否包含h中的任何键的最佳方法是什么,如果包含,则返回它包含的键的值?例如,对于上面的h和s的例子,输出应该是v1。编辑:只有字符串是用户定义的。哈希将始终相同。 最佳答案
所以我开始关注ruby,很多东西看起来不错,但我对隐式return语句很反感。我理解默认情况下让所有内容返回self或nil但不是语句的最后一个值。对我来说,它看起来非常脆弱(尤其是)如果你正在使用一个不打算返回某些东西的方法(尤其是一个改变状态/破坏性方法的函数!),其他人可能最终依赖于一个返回对方法的目的并不重要,并且有很大的改变机会。隐式返回有什么意义?有没有办法让事情变得更简单?总是有返回以防止隐含返回被认为是好的做法吗?我是不是太担心这个了?附言当人们想要从方法中返回特定的东西时,他们是否经常使用隐式返回,这不是让你组中的其他人更容易破坏彼此的代码吗?当然,记录一切并给出
为什么以下不同?Time.now.end_of_day==Time.now.end_of_day-0.days#falseTime.now.end_of_day.to_s==Time.now.end_of_day-0.days.to_s#true 最佳答案 因为纳秒数不同:ruby-1.9.2-p180:014>(Time.now.end_of_day-0.days).nsec=>999999000ruby-1.9.2-p180:015>Time.now.end_of_day.nsec=>999999998
在Ruby1.9.3(可能还有更早的版本,不确定)中,我试图弄清楚为什么Ruby的String#split方法会给我某些结果。我得到的结果似乎与我的预期相反。这是一个例子:"abcabc".split("b")#=>["a","ca","c"]"abcabc".split("a")#=>["","bc","bc"]"abcabc".split("c")#=>["ab","ab"]在这里,第一个示例返回的正是我所期望的。但在第二个示例中,我很困惑为什么#split返回零长度字符串作为返回数组的第一个值。这是什么原因呢?这是我所期望的:"abcabc".split("a")#=>["bc"
导读语言模型给我们的生产生活带来了极大便利,但同时不少人也利用他们从事作弊工作。如何规避这些难辨真伪的文字所产生的负面影响也成为一大难题。在3月9日智源Live第33期活动「DetectGPT:判断文本是否为机器生成的工具」中,主讲人Eric为我们讲解了DetectGPT工作背后的思路——一种基于概率曲率检测的用于检测模型生成文本的工具,它可以帮助我们更好地分辨文章的来源和可信度,对保护信息真实、防止欺诈等方面具有重要意义。本次报告主要围绕其功能,实现和效果等展开。(文末点击“阅读原文”,查看活动回放。)Ericmitchell斯坦福大学计算机系四年级博士生,由ChelseaFinn和Chri
之前说过10之后的版本没有3dScan了,所以还是9.8的版本或者之前更早的版本。 3d物体扫描需要先下载扫描的APK进行扫面。首先要在手机上装一个扫描程序,扫描现实中的三维物体,然后上传高通官网,在下载成UnityPackage类型让Unity能够使用这个扫描程序可以从高通官网上进行下载,是一个安卓程序。点到Tools往下滑,找到VuforiaObjectScanner下载后解压数据线连接手机,将apk文件拷入手机安装然后刚才解压文件中的Media文件夹打开,两个PDF图打印第一张A4-ObjectScanningTarget.pdf,主要是用来辅助扫描的。好了,接下来就是扫描三维物体。将瓶
我们目前正在为ROR3.2开发自定义cms引擎。在这个过程中,我们希望成为我们的rails应用程序中的一等公民的几个类类型起源,这意味着它们应该驻留在应用程序的app文件夹下,它是插件。目前我们有以下类型:数据源数据类型查看我在app文件夹下创建了多个目录来保存这些:应用/数据源应用/数据类型应用/View更多类型将随之而来,我有点担心应用程序文件夹被这么多目录污染。因此,我想将它们移动到一个子目录/模块中,该子目录/模块包含cms定义的所有类型。所有类都应位于MyCms命名空间内,目录布局应如下所示:应用程序/my_cms/data_source应用程序/my_cms/data_ty