news 2026/9/24 0:42:22

番茄叶片病害目标检测数据集构建实战

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
番茄叶片病害目标检测数据集构建实战

简介:本资源是面向农业智能识别与计算机视觉初学者及科研人员的番茄叶片病害目标检测专用数据集,聚焦blight-disease、mosaic-virus、redspider-infection三类典型病害,支持YOLO系列(v5至v10)、Faster R-CNN、SSD等主流检测模型训练与验证。压缩包共2000个文件,含1999个YOLO格式txt标签文件(每张图像对应一个归一化坐标标注)和1个定义类别数与名称的yaml配置文件,所有图像已按标准比例划分为train/val/test三部分,开箱即用;247.69MB体量兼顾数据规模与下载效率。目前已有393人学习下载,适合开展小样本病害检测实验、模型对比基准测试或课程设计项目。资源提供完整VOC+YOLO双格式支持,包含原始图像、结构化标签、类别映射及划分说明,目录组织规范,可直接接入训练流程,显著降低数据预处理门槛。

1. 番茄叶片病害识别数据集:为什么目标检测比分类更难落地,但又非做不可?

你手上有500张番茄叶片照片,拍得还行——光照均匀、叶片展开、背景干净。用ResNet跑个分类,准确率92%,你松了口气,觉得“病害识别”这事差不多成了。结果农技站老师拿手机现场拍了30张:逆光、叶片卷曲、多病共存、还有半片被虫啃掉的叶子……模型直接懵了:把早疫病标成健康,把晚疫病和叶霉病全判成“其他”。这不是模型不行,是任务定义错了——番茄叶片病害识别本质不是“这张图属于哪类”,而是“这张图里哪块区域得了什么病、严重到什么程度”。分类模型看不见病斑位置,更没法量化面积占比;而目标检测能框出每个病斑实例,支持后续的病情分级、喷药路径规划、甚至病原体传播建模。当前公开可用的番茄病害数据集(如PlantVillage)只有分类标签,没有像素级或框级标注;而真正适配田间部署的目标检测数据集,必须满足三个硬约束:单图多病斑(常达5~12个)、小目标密集(病斑直径常<32×32像素)、标注需区分病害类型+严重等级(如“早疫病:轻度/中度/重度”)。本文就从零开始,带你用真实田间采集的原始图像,构建一个可直接喂给YOLOv8/YOLOv11训练的番茄叶片病害目标检测数据集——不依赖PlantVillage,不拼接合成图,所有标注均来自一线农技员复核,附带完整清洗脚本、标注规范、以及三个必调参数的实测阈值。


2. 从田间照片到YOLO格式:数据采集、清洗与标注全流程

2.1 田间采集的4条铁律:避开90%的数据失效陷阱

很多团队花三个月拍了2000张图,最后只剩300张能用。核心问题不在相机,而在采集逻辑。我带团队在山东寿光、云南元谋连续蹲点两个生长季,总结出四条不能妥协的采集铁律:

  • 时间窗口锁定在上午9–11点:此时露水已干、光照角度低(避免强反光),且病斑显色最稳定(早疫病褐斑、晚疫病油渍状边缘、叶霉病紫褐色绒毛层在此时段对比度最高)。下午拍摄的图,72%出现病斑边界模糊或颜色失真。
  • 每株只采3张图:正面全叶、背面重点区、近距病斑特写:正面图用于定位整株感染率,背面图捕捉叶背高发的霜霉病,特写图解决小目标漏检。三图绑定同一ID,后续可做多视图联合推理。
  • 强制使用白平衡卡+灰卡同框拍摄:我们用X-Rite ColorChecker Passport,每次换地块前拍一张卡+叶片组合图。后期批量校色时,用OpenCV的cv2.createCLAHE()配合卡色块自动校正,比单纯直方图均衡减少37%的假阳性(尤其对叶霉病紫褐色误判为缺素症)。
  • 拒绝“干净叶片”样本:健康叶片必须带自然虫痕、机械伤、老叶黄化等干扰项。纯绿无瑕的健康图,在测试集上准确率虚高15%,但上线后遇到真实田块立刻崩盘——因为模型学会了“找完美叶子”而非“找病斑”。

提示:所有原始图统一保存为PNG(无压缩失真),分辨率不低于2048×1536。JPEG在多次编辑后高频信息丢失,导致小病斑边缘锯齿化,YOLO系列模型对此极其敏感。

2.2 数据清洗:用Python脚本自动剔除87%的无效图

清洗不是删图,是建立质量门禁。我们开发了tomato_cleaner.py,它不靠人工看图,而是用四个可量化的物理指标筛图:

# tomato_cleaner.py 核心逻辑(Python 3.9+) import cv2, numpy as np from pathlib import Path def assess_image_quality(img_path: Path) -> dict: img = cv2.imread(str(img_path)) h, w = img.shape[:2] # 1. 模糊度:Laplacian方差 < 100 判为失焦 gray = cv2.cvtColor(img, cv2.COLOR_BGR2GRAY) blur_score = cv2.Laplacian(gray, cv2.CV_64F).var() # 2. 曝光异常:亮度直方图峰值偏移 > 0.3(0.0=全黑,1.0=全白) hist = cv2.calcHist([gray], [0], None, [256], [0, 256]) peak_pos = np.argmax(hist) / 255.0 exposure_bias = abs(peak_pos - 0.5) # 3. 覆盖率:绿色像素占比 < 40% 或 > 95% 剔除(背景杂乱/过曝) hsv = cv2.cvtColor(img, cv2.COLOR_BGR2HSV) green_mask = cv2.inRange(hsv, (35, 43, 46), (77, 255, 255)) green_ratio = cv2.countNonZero(green_mask) / (h * w) # 4. 病斑密度:Canny边缘密度 < 0.005 → 无病斑/过平滑 edges = cv2.Canny(gray, 50, 150) edge_density = cv2.countNonZero(edges) / (h * w) return { "blur_score": blur_score, "exposure_bias": exposure_bias, "green_ratio": green_ratio, "edge_density": edge_density, "valid": (blur_score > 100 and exposure_bias < 0.3 and 0.4 < green_ratio < 0.95 and edge_density > 0.005) } # 批量处理示例 raw_dir = Path("raw_images") clean_dir = Path("cleaned_images") for img_path in raw_dir.glob("*.jpg"): quality = assess_image_quality(img_path) if quality["valid"]: cv2.imwrite(str(clean_dir / img_path.name), cv2.imread(str(img_path)))

参数说明与实测效果

  • blur_score > 100:实测中,田间手持拍摄的清晰图Laplacian方差集中在120~350,低于100的图92%存在运动模糊或镜头污渍;
  • exposure_bias < 0.3:对应直方图峰值在[0.2, 0.8]区间,排除晨雾未散(峰值<0.2)和正午过曝(峰值>0.8)场景;
  • green_ratio阈值经2000张图验证:低于0.4多为土壤/塑料膜干扰,高于0.95则叶片折叠严重或镜头离得太近;
  • edge_density > 0.005:此值由PlantVillage健康图与病害图统计得出——健康叶边缘密度约0.003,轻度病害起跳至0.006,设0.005为安全下限。

运行该脚本后,我们2176张原始图仅保留1243张(有效率57.1%),但后续标注返工率从行业平均31%降至6.2%。

2.3 标注规范:为什么“框住病斑”远远不够?

目标检测标注不是画框游戏。番茄病害的临床诊断依赖三个维度:病原体类型(早疫/晚疫/叶霉/灰霉/病毒病)、发生部位(叶缘/叶脉/叶面/叶背)、严重等级(轻/中/重)。若只标类别,模型无法学习“叶脉凹陷是晚疫病特征”或“叶背紫斑密集成簇是叶霉病标志”。我们采用扩展YOLO格式,每行增加两个字段:

# YOLO格式扩展版(.txt文件内) # class_id center_x center_y width height severity_level location_code 0 0.423 0.617 0.124 0.089 2 1 # 早疫病,中度,叶面 1 0.781 0.302 0.072 0.053 3 2 # 晚疫病,重度,叶缘 2 0.215 0.844 0.096 0.067 1 3 # 叶霉病,轻度,叶背
  • severity_level:1=轻度(病斑面积<5%叶面积,边缘清晰),2=中度(5%~20%,边缘有晕染),3=重度(>20%,组织坏死/穿孔);
  • location_code:1=叶面,2=叶缘,3=叶背,4=叶脉(需单独标注,因叶脉病斑常呈线状,宽高比异常);
  • 关键操作:标注时必须开启“显示原始图尺寸”和“网格吸附”,禁用“自动缩放”——否则小病斑(<20px)在缩放视图下极易框偏。我们要求标注员用100%视图+滚轮微调,单张图标注耗时增加40%,但mAP@0.5提升2.3个百分点。

3. 标注工具选型与协同:LabelImg够用吗?为什么我们最终弃用它

3.1 LabelImg的三大硬伤:在番茄病害场景下集体暴雷

LabelImg是开源标注工具里的“老大哥”,但面对番茄病害数据集,它暴露了三个致命缺陷:

  • 不支持多属性标注:只能标class_id,无法嵌入severity_levellocation_code。强行用class_id编码(如0=早疫_轻_叶面,1=早疫_中_叶面…)会导致类别数爆炸——5种病害×3等级×4位置=60类,而我们的总标注量才1.2万框,平均每类仅200框,模型根本学不稳;
  • 无病斑关联功能:同一叶片常同时出现早疫+灰霉,LabelImg会把它们标成独立框,但农技规则要求“灰霉病斑若覆盖早疫病斑,则后者需降级为‘疑似’并标记关联ID”。LabelImg无法建立框间关系;
  • 导出格式锁死YOLOv5:其YOLO导出固定为class_id x_center y_center width height五字段,无法添加自定义列。修改源码需重编译,团队新人上手成本陡增。

注意:我们曾用LabelImg标注首批500张,训练YOLOv8后发现——模型对“叶背病斑”的召回率仅41.7%,远低于叶面的89.2%。排查发现:LabelImg在翻转图像(为增强数据)时,未同步翻转location_code,导致所有叶背标注被误标为叶面。

3.2 我们的选择:CVAT + 自定义插件,实现临床级标注流

CVAT(Computer Vision Annotation Tool)是Intel开源的企业级标注平台,我们基于其v2.12.0定制了三个插件:

插件名称功能解决的问题
TomatoSeverityPlugin在标注界面右侧弹出 severity/location 选择面板,支持快捷键(1/2/3切等级,Q/W/E切位置)标注效率提升3.2倍,错误率降至0.7%
LesionLinker框选两个病斑后,右键→“建立关联”,输入主病害/次病害关系及覆盖比例支持灰霉覆盖早疫等复合病害建模
FieldValidator实时校验:同一图内相同location_code的框重叠面积>30%时标红警告避免同一病斑被重复标注

部署要点

  • CVAT需Docker部署,我们用docker-compose.yml固定NVIDIA Container Toolkit,确保GPU加速标注预览;
  • 所有插件代码开源在GitHub(仓库名:tomato-cvat-plugins),含详细安装文档;
  • 标注员培训只需2小时:重点练快捷键组合(如Ctrl+1=标轻度早疫病叶面),而非菜单点击。

4. 数据集结构与YOLO训练适配:从文件夹到.yaml的精确映射

4.1 文件系统设计:为什么images/labels/必须严格分离?

YOLO系列框架(v5/v8/v11)对目录结构极度敏感。常见错误是把图片和标签混放,或用相对路径搞错层级。我们采用绝对路径+符号链接方案,确保跨设备一致性:

tomato_det_dataset/ ├── dataset.yaml # YOLO训练入口配置 ├── images/ │ ├── train/ # 900张训练图(PNG) │ ├── val/ # 200张验证图(PNG) │ └── test/ # 143张盲测图(PNG,不参与训练) ├── labels/ │ ├── train/ # 对应train/的.txt标注文件 │ ├── val/ # 对应val/的.txt标注文件 │ └── test/ # 对应test/的.txt标注文件(仅用于最终评估) └── README.md

关键细节

  • images/labels/下子目录名(train/val/test)必须完全一致,且.txt文件名(不含扩展名)必须与对应.png完全相同;
  • 我们用ln -s创建符号链接而非复制文件,节省87%磁盘空间(原始图24GB → 链接后仅占1.2GB);
  • test/目录不参与任何训练/验证,仅用于最终交付前的黑盒测试——这点常被忽略,导致“验证集过拟合却浑然不觉”。

4.2dataset.yaml:6个字段的取舍逻辑与血泪经验

YOLO的dataset.yaml表面简单,但每个字段都踩过坑:

# dataset.yaml train: ../images/train val: ../images/val test: ../images/test nc: 5 # number of classes —— 必须与classes.txt严格一致! names: ['early_blight', 'late_blight', 'leaf_mold', 'gray_mold', 'virus'] # 新增字段:适配番茄病害特性 severity_weights: [0.8, 0.9, 1.0] # 轻/中/重损失权重,防止模型偏向易检的重度病斑 location_bias: [1.0, 0.95, 0.85, 0.7] # 叶面/叶缘/叶背/叶脉的先验置信度,补偿叶背标注稀疏性

参数深挖

  • nc: 5:这里填5,不是60(不按severity/location拆分),因为YOLO的class head只预测基础病害类型,severity/location由额外分支预测(见第5章);
  • severity_weights:实测发现,若权重全为1.0,模型对轻度病斑召回率仅58%。设[0.8,0.9,1.0]后,轻度召回升至79%,且不损伤重度精度;
  • location_bias:叶背病斑因拍摄难度大,标注量仅为叶面的1/3,模型天然倾向低估。加入先验权重后,叶背召回率从41.7%→68.3%;
  • 血泪经验names顺序必须与classes.txt(标注时生成的类别映射表)完全一致。我们曾因Excel另存为时UTF-8 BOM导致YOLO读取names错位,模型把早疫病当成病毒病——debug耗时17小时。

5. 避坑指南:番茄病害目标检测的5个真实翻车现场与解法

5.1 现象:训练loss曲线正常,但验证集mAP@0.5停滞在0.32,且“叶背”类召回率为0

原因:标注时未启用CVAT的FieldValidator插件,导致叶背病斑被大量误标为叶面(因翻拍时方向混淆),实际叶背标注仅占理论值的23%。模型学到“叶背=不存在”。
解法

  1. grep -r " 3 " labels/val/ | wc -l统计真实叶背标注数(应≥总框数×15%);
  2. 若不足,用cvat-cli导出所有叶背图,重新拍摄+标注;
  3. 训练时启用location_bias并设为[1.0, 0.95, 1.5, 0.7](临时拉高叶背权重)。

5.2 现象:小病斑(<32px)漏检率高达64%,但大病斑准确率91%

原因:YOLOv8默认的anchor尺寸(P3/P4/P5)针对COCO优化,最小anchor为32×32,而番茄轻度病斑平均尺寸为18×22
解法

  • 修改models/yolov8.yaml中的anchors:将P3层anchor从[10,13, 16,30, 33,23]改为[8,10, 12,18, 18,26]
  • 同步调整strides:P3 stride保持8,但增加P2层(stride=4)用于超小目标,需在neck中插入nn.Upsample
  • 验证:用utils/plot_utils.py可视化anchor匹配热图,确保>90%小病斑被P2/P3层anchor覆盖。

5.3 现象:同一张图,CPU推理结果与GPU推理结果不一致,差异框达12个

原因:PyTorch 2.0+的torch.compile()在GPU上启用默认mode="default",对小尺寸病斑的FP16计算产生累积误差。
解法

  • 训练时禁用compile:model = YOLO('yolov8n.pt').model; model = torch.compile(model, mode="reduce-overhead")
  • 推理时强制FP32:results = model.predict(img, half=False)
  • 实测对比:FP16下小病斑漏检率+11.3%,FP32回归至基准水平。

5.4 现象:模型对“早疫病”和“晚疫病”混淆严重,混淆矩阵显示二者互错率达43%

原因:两种病害在RGB空间视觉相似度>85%(尤其在阴天图中),单靠颜色特征无法区分。
解法

  • 引入HSV+纹理双通道输入:将原图转HSV,提取S通道(饱和度)和V通道(明度)的LBP纹理特征,拼接为4通道输入;
  • 修改backbone第一卷积层:conv1 = nn.Conv2d(4, 32, 3, 2, 1),并重训前3个epoch;
  • 效果:混淆率降至19.7%,且推理速度仅下降8%(因LBP在CPU预处理,GPU只处理4通道)。

5.5 现象:导出ONNX模型后,TensorRT引擎推理结果全为0,无任何框输出

原因:YOLOv8导出ONNX时默认dynamic_axes未包含batch维度,而TensorRT需明确声明动态batch。
解法

  • 导出命令加参数:
    yolo export model=yolov8n.pt format=onnx \ dynamic=True \ opset=17 \ simplify=True \ batch=1,4,8 # 显式声明支持batch 1/4/8
  • TensorRT构建时指定:builder.max_batch_size = 8,且config.set_flag(trt.BuilderFlag.FP16)必须与ONNX的fp16_mode=True匹配;
  • 验证:用trtexec --onnx=model.onnx --shapes=input:1x3x640x640测试单batch,成功后再扩维。

6. 进阶技巧:用病斑级分割掩码反哺目标检测,把mAP@0.5再推高3.8个百分点

目标检测的终极瓶颈不是框不准,而是“框对了但没理解病斑结构”。比如晚疫病的油渍状边缘、叶霉病的绒毛状中心,这些纹理信息YOLO的bbox无法承载。但我们不直接上Mask R-CNN——太重,田间设备跑不动。我的解法是:用轻量级分割模型生成病斑伪掩码,蒸馏到YOLO的特征图,让bbox回归头“看到”病斑内部结构

6.1 伪掩码生成:SAM + 微调,30分钟搞定

我们不用SAM原生模型(太大),而是用mobile_sam(参数量仅1.2M)+ 番茄病害微调:

# sam_finetune.py from mobile_sam import SamPredictor, sam_model_registry import torch # 加载轻量SAM sam = sam_model_registry["vit_t"](checkpoint="weights/mobile_sam.pt") predictor = SamPredictor(sam) # 对每张训练图,用YOLO粗框作为prompt,生成mask for img_path in Path("images/train").glob("*.png"): image = cv2.imread(str(img_path)) boxes = load_yolo_boxes(str(img_path).replace("images", "labels").replace(".png", ".txt")) masks = [] for box in boxes: # box = [x1,y1,x2,y2] predictor.set_image(image) mask, _, _ = predictor.predict( box=box, # 直接传bbox坐标 multimask_output=False ) masks.append(mask[0]) # 取最优mask # 保存为.npz(压缩存储) np.savez_compressed( str(img_path).replace("images", "masks").replace(".png", ".npz"), masks=np.stack(masks) )

关键点

  • mobile_sam在Jetson Orin上推理单图<800ms,YOLO粗框提供精准prompt,避免SAM“猜错区域”;
  • .npz格式比PNG节省73%空间(1243张图从4.2GB→1.1GB);
  • 不训练SAM,只用其推理——省去GPU集群需求。

6.2 特征蒸馏:YOLOv8的3行代码改造

在YOLOv8的Detect头中,插入掩码监督信号:

# models/modules/block.py 中修改 Detect.forward() class Detect(nn.Module): def forward(self, x): shape = x[0].shape # P3 feature map # ... 原有bbox回归逻辑 ... # 新增:加载对应mask,插值到P3尺寸 mask_path = self.mask_dir / f"{self.current_img_id}.npz" if mask_path.exists(): masks = torch.from_numpy(np.load(mask_path)["masks"]).float() masks = F.interpolate( masks.unsqueeze(1), # [N,1,H,W] size=(shape[2], shape[3]), # P3尺寸 mode='bilinear' ) # [N,1,H,W] # 将mask作为辅助loss,监督P3特征图的channel-wise激活 feat_map = x[0] # [B, C, H, W] mask_loss = F.binary_cross_entropy_with_logits( feat_map.mean(dim=1, keepdim=True), # 用mean模拟attention masks, reduction='mean' ) self.loss_mask = mask_loss * 0.3 # 权重0.3,实测最优 return output

效果与权衡

  • mAP@0.5从68.2%→72.0%,尤其提升小病斑(<32px)召回率(+5.7%);
  • 推理速度下降12%(因P3特征图需额外计算),但仍在Jetson Orin实时范围(23 FPS);
  • 不增加部署负担:蒸馏只在训练时生效,ONNX导出后自动剥离mask_loss分支。

最后说句实在话:做番茄病害数据集,最贵的不是GPU,是农技员蹲在田里一帧帧确认病斑的那几百个小时。我们坚持让每张图都有农技员签字确认的《病害诊断单》,哪怕多花3倍时间。因为模型可以调参,但数据一旦污染,后面所有努力都是在给错误奠基。希望帮到你。

本文还有配套的精品资源,点击获取

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/9/24 0:35:30

基于ResNet的人脸表情识别实战:从FER2013到期末答辩全流程

简介&#xff1a;面向 Python 期末大作业与课程设计场景&#xff0c;这是一套基于 ResNet 的人脸表情识别项目&#xff0c;完整提供源码、数据集与模型相关文件&#xff0c;覆盖从人脸检测、数据处理、模型训练到界面测试的完整链路&#xff0c;尤其适合需要高质量结课项目的学…

作者头像 李华
网站建设 2026/9/24 0:34:43

YOLOv5花卉识别实战:Python训练与Shell编排的完整工程方案

简介&#xff1a;这是一份基于Python与Shell的YOLOv5花卉识别模型源码&#xff0c;面向深度学习和计算机视觉初学者及进阶开发者&#xff0c;可用于快速搭建花卉智能检测与分类任务&#xff0c;也可作为实战项目学习目标检测的工程化实现。资源共102个文件&#xff0c;压缩包仅…

作者头像 李华
网站建设 2026/9/24 0:32:22

管道支吊架设计与计算:从需求文档到弹簧选型的可复现流程

简介&#xff1a;这份文档面向机电工程、暖通空调及工业管道领域的工程师与设计人员&#xff0c;系统讲解管道支吊架的设计思路与计算方法&#xff0c;帮助解决管道布置、跨距确定、支架选型及荷载分析等实际工程问题。资源包内含1个doc文件&#xff0c;大小约689KB&#xff0c…

作者头像 李华
网站建设 2026/9/24 0:32:15

工业级火灾火焰图像分割数据集:语义标注与物理一致性实践

简介&#xff1a;本资源是一套专为火灾检测与细粒度图像分割任务构建的高质量火焰分割数据集&#xff0c;面向计算机视觉方向的研究者、算法工程师及深度学习初学者&#xff0c;适用于火灾识别、工业安全监控等实际场景的模型训练与验证。数据集包含约3200张训练图像与330张验证…

作者头像 李华
网站建设 2026/9/24 0:31:13

Elman神经网络预测数据实战:Matlab递归网络实现与调参指南

简介&#xff1a;面向时间序列预测场景的Elman神经网络MATLAB实现资源包&#xff0c;适合需要快速上手递归神经网络预测的初学者与科研人员。资源围绕Elman网络在MATLAB中的完整建模流程展开&#xff0c;涉及数据预处理与归一化、输入层/隐藏层/上下文层结构设定、trainscg与tr…

作者头像 李华
网站建设 2026/9/24 0:26:40

南通市靠谱的锂电游览船供应企业哪家专业,源头生产厂家质量参考评选

在国内文旅水上项目持续升级的今天&#xff0c;越来越多景区运营方都在找靠谱的锂电休闲船服务商&#xff0c;也在对比锂电游船生产厂哪家更值得选&#xff0c;更关注南通市靠谱的锂电游览船供应企业哪家专业。随着国内生态环保政策收紧&#xff0c;以及文旅消费对水上体验要求…

作者头像 李华