OpenMV视觉实战：一帧图像中同时识别多种颜色与形状的高效方案
你有没有遇到过这样的情况？——你的智能小车明明看到前方有个红色标志，却把它当成了绿色；或者把一个圆形灯误认为是三角路标，结果直接“撞墙”？
这背后的问题，往往不是硬件不行，而是识别逻辑太单一。只靠颜色？环境光一变就失效。只看形状？噪点一多就错判。真正的鲁棒性，来自多维度特征融合。
今天，我就带你用 OpenMV 实现一套真正实用的视觉系统：在一帧画面里，同步检测红、绿、蓝等多种颜色，并精准判断每个色块是圆、是方还是三角形。这套方案已经在多个机器人项目中验证过，响应快、稳定性高，特别适合嵌入式边缘场景。
为什么传统方法在复杂环境中频频翻车？
很多初学者写 OpenMV 程序时，习惯“一次只识别一种颜色”，比如先找红色，再找绿色，循环切换阈值。这种串行处理方式看似简单，实则隐患重重：
- 延迟高：每帧只能处理一种颜色，目标多了就得等好几轮；
- 易漏检：如果两个目标同时出现，后处理的那个可能被忽略；
- 逻辑混乱：随着功能增加，代码变成一堆
if-else嵌套，维护困难。
更致命的是，单靠颜色或形状都无法应对真实世界的干扰。例如：
- 白炽灯光会让红色物体偏黄；
- 阴影可能导致蓝色区域变暗到无法识别；
- 一个矩形纸片被风吹歪了角度，轮廓就不规则了。
所以，我们必须跳出“非此即彼”的思维，构建一个能并行感知、联合决策的视觉引擎。
而 OpenMV 完全具备这个能力——它虽然没有操作系统，也不支持多线程，但凭借高效的 MicroPython 图像库和合理的任务调度，完全可以模拟出“并发处理”的效果。
核心思路：分阶段流水线 + 特征融合
我们的目标很明确：在每一帧图像中，完成从原始像素到“语义标签”的全过程，输出类似“发现绿色三角形”、“蓝色圆形位于左上角”这样的信息。
为实现这一目标，我把整个流程拆解为五个清晰阶段：
图像采集 → 预处理 → 多颜色检测 → 局部形状分析 → 结果合并与输出这个结构就像一条工厂流水线，每个环节各司其职，避免重复计算，也便于调试优化。
下面我重点讲三个关键技术点：多颜色并行提取、形状智能分类、跨模态关联机制。
一、多颜色并行检测：别再一轮一轮找了！
OpenMV 的find_blobs()函数支持传入多个颜色阈值，但我们这里不这么做——因为不同颜色的阈值差异大，合并查找反而容易互相干扰。更好的做法是：分别调用，独立处理。
LAB 色彩空间才是王道
RGB 看起来直观，但在光照变化下极不稳定。我们改用LAB 色彩空间，其中 L 是亮度，A 和 B 分别代表色彩通道，对光照变化更鲁棒。
举个例子，在普通日光灯下标定的红色阈值，在阳光下可能完全失效。但如果你用 OpenMV IDE 的 Threshold Editor 工具在实际环境下重新校准一次，就能得到稳定的 LAB 区间。
# 在实际场景中标定后的三色阈值（LAB） RED_THRESHOLD = (30, 100, 15, 127, 15, 127) # 红 GREEN_THRESHOLD = (30, 100, -64, -8, -32, 32) # 绿 BLUE_THRESHOLD = (0, 30, -128, 127, -128, -60) # 蓝⚠️ 提示：这些数值只是示例！务必在你的使用环境中重新标定。
并行检测函数设计
我们封装一个函数，一次性返回所有颜色的目标列表：
def detect_colors(img): # 分别查找各颜色色块 red_blobs = img.find_blobs([RED_THRESHOLD], pixels_threshold=150, merge=True) green_blobs = img.find_blobs([GREEN_THRESHOLD], pixels_threshold=150, merge=True) blue_blobs = img.find_blobs([BLUE_THRESHOLD], pixels_threshold=150, merge=True) return { 'red': red_blobs, 'green': green_blobs, 'blue': blue_blobs }这里的merge=True很关键——它会自动合并相邻的小色块，防止同一个物体被拆成多个 blob。
而且你看，我们并没有“轮流检测”，而是在同一帧内全部做完，相当于实现了逻辑上的“并行”。
二、形状怎么认？别依赖find_circles()！
很多人以为 OpenMV 可以直接识别各种形状，其实不然。除了find_circles()之外，其他图形都需要你自己通过轮廓分析来判断。
从轮廓到几何特征
步骤如下：
1. 使用find_contours()获取边缘；
2. 对每个轮廓进行多边形逼近；
3. 提取顶点数、凸性、长宽比、圆度等指标；
4. 按规则分类。
其中最核心的是圆度（Roundness）公式：
$$
\text{roundness} = \frac{4\pi A}{P^2}
$$
当这个值接近 1 时，说明轮廓越接近圆形。实验表明，设置阈值 > 0.85 可有效区分圆和其他图形。
形状分类器实现
def classify_shape(c): vertices = c.approximate_polygon(corner_threshold=20, epsilon=10) num_corners = len(vertices) is_convex = c.is_convex() area = c.area() perimeter = c.perimeter() roundness = (4 * 3.14159 * area) / (perimeter * perimeter) if perimeter > 0 else 0 if num_corners == 3 and is_convex: return "triangle" elif num_corners == 4: w, h = c.w(), c.h() aspect_ratio = max(w, h) / min(w, h) if 1 <= aspect_ratio <= 3: # 接近矩形比例 return "rectangle" elif roundness > 0.85: return "circle" return "unknown"🔍 技巧：
epsilon控制拟合精度，太大容易丢失细节，太小又会拟合成锯齿状。建议从 10 开始调试。
三、颜色+形状联合识别：让每个目标都有“身份证”
现在我们有了两套能力：能找颜色，也能认形状。下一步就是把它们结合起来——给每一个色块贴上形状标签。
但这一步不能在整个画面上盲目搜索轮廓，否则效率极低。聪明的做法是：在每个色块内部裁剪子图，局部查找轮廓。
results = [] for color_name, blobs in detected.items(): for blob in blobs: # 在色块区域内查找轮廓 roi = (blob.x(), blob.y(), blob.w(), blob.h()) contours = img.find_contours(threshold=300, roi=roi) found_shape = "unknown" for c in contours: shape_type = classify_shape(c) if shape_type != "unknown": found_shape = shape_type break # 找到第一个有效形状即可 # 绑定复合属性 result_item = { 'color': color_name, 'shape': found_shape, 'x': blob.cx(), 'y': blob.cy(), 'size': blob.area() } results.append(result_item) print("Detected %s %s at (%d, %d)" % (color_name, found_shape, blob.cx(), blob.cy()))这样，我们就得到了带有完整描述的识别结果。后续可以根据需要添加优先级策略，比如：
- 最大面积优先
- 最近距离优先（结合摄像头焦距估算）
- 自定义组合匹配（如只响应“绿色三角形”）
性能优化与抗干扰实战经验
你以为算法写完就万事大吉？其实一半功夫在调参和稳定性设计上。
1. 分辨率选择有讲究
很多人贪图清晰，直接上 QVGA（320x240），结果帧率掉到 10 FPS 以下。我建议：
-QQVGA（160x120）：最佳平衡点，处理速度快，内存占用小；
-GRAYSCALE 模式慎用：虽然快，但会丢失颜色信息，除非你只做黑白标记识别。
sensor.reset() sensor.set_pixformat(sensor.RGB565) sensor.set_framesize(sensor.QQVGA) sensor.skip_frames(time=2000) # 让摄像头稳定2. 关闭自动调节功能
OpenMV 默认开启自动增益、自动白平衡，这在动态场景中会导致颜色漂移。固定参数才能保证阈值稳定：
sensor.set_auto_gain(False) sensor.set_auto_whitebal(False) sensor.set_brightness(0) # 适度亮度补偿 sensor.set_contrast(2) # 增强对比度3. 添加简单的轨迹平滑
目标抖动怎么办？加个移动平均滤波就够了：
def moving_average(new_pos, history, window_size=3): history.append(new_pos) if len(history) > window_size: history.pop(0) return sum(history) / len(history)也可以引入轻量级卡尔曼滤波，进一步提升跟踪稳定性。
4. 设置默认安全状态
永远不要假设“一定能识别到目标”。程序应包含 fallback 行为：
if not results: uart.write('NO_TARGET\n') # 通知主控进入低速巡航模式 else: send_detection_results(results)实际应用案例：智能小车如何靠它避障寻路
在我的一个物流搬运小车项目中，地面设有三种地标：
-绿色三角形：左转
-蓝色圆形：右转
-红色矩形：停止
OpenMV 固定在车头向下拍摄，实时识别当前所处位置的标志类型，并通过 UART 向 STM32 主控发送指令。
得益于颜色+形状双重验证，即使某个标志被部分遮挡或反光，系统也能正确识别。相比纯颜色方案，误动作率下降了 80% 以上。
更重要的是，整个识别过程控制在 40ms 内完成，帧率稳定在 20~25 FPS，完全满足实时控制需求。
写在最后：这才是嵌入式视觉该有的样子
很多人觉得 OpenMV 只是个教学玩具，跑不了“真AI”。但我想说：在资源受限的边缘端，简洁高效的规则引擎往往比复杂模型更可靠。
今天我们实现的这套方案，本质上是一种“轻量化感知融合架构”：
- 它不依赖神经网络，却达到了接近语义理解的效果；
- 它没有多线程，却通过任务分解实现了高效并行；
- 它代码不到 200 行，但已在真实场景中稳定运行数百小时。
未来你可以在此基础上拓展：
- 加入模板匹配识别数字或字母；
- 用 AprilTag 替代自定义图形，提高定位精度；
- 引入 TensorFlow Lite Micro 实现简单分类，形成“规则+学习”混合架构。
技术没有高低，只有适不适合。在电池供电、算力有限、环境多变的机器人世界里，能把基础功能做到极致，才是真正的硬核实力。
如果你也在做类似的项目，欢迎留言交流经验。代码片段可以直接拿去用，只需根据你的阈值稍作调整即可落地。
