跳到主要内容
研究
I数字化进行中 · 2025

MCTP:多模态作物表型数据处理平台

一个桌面平台以统一界面、交互式调参、批量处理和结构化导出,处理高光谱、LiDAR、RGB 和热红外表型数据。

MCTP 启动界面与四个模态模块
图 1. MCTP 启动界面与四个模态模块

问题​

田间表型调查会为每个小区产生高光谱数据立方体、LiDAR 点云、RGB 图像和热红外图像。这些数据通常分别在不同软件中处理,参数和导出格式各不相同,使多模态性状分析既慢又难以复现。

MCTP(Multi-modal Crop Trait Processing,多模态作物性状处理平台)为黍峰生物的田间步行式表型平台开发,我负责系统优化以及数据处理与分析方法。

方法​

一个平台集成四个模态模块,界面统一:控制面板、实时预览和处理日志,交互式调参,以及 JSON/CSV 导出。

高光谱​

读取 ENVI HDR/SPE 并解析波长;自动识别植被指数所需波段;计算 NDVI,以近红外阈值构建植株掩膜,以分位数掩膜去除反光;导出叶片区域平均光谱(CSV)和统计摘要(JSON);整目录批量处理。

LiDAR​

读取 PLY、LAS、LAZ 和文本格式;RANSAC 重定地面、体素降采样、裁剪和按高度着色;DBSCAN 分割植株,在 SegTuner 窗口中交互调参;计算覆盖度、体素占有率、凸包体积及高度分位数 H10/H50/H90;导出裁剪点云和 JSON 报告。

RGB​

联合 ExG、CIVE、VDI 三种颜色指数分割植被;去除反光、标签和边框;以自适应形态学和骨架增强保留细小植株;以分水岭和连通域标记区分单株;输出叠加图、小区级 JSON 指标和单株 CSV 表。

热红外​

读取 BMP 图像及 DDT 温度矩阵,支持翻转和标定;基于 Otsu 方法和分位数给出建议阈值;通过滑块调节温度阈值、HSV 范围和形态学参数;提供叠加图、热图和仅植株预览;导出 PNG、NPY、CSV 和 JSON。

结果​

MCTP 把四条各自独立的处理链整合为一条从原始文件到结构化、可直接统计的输出的统一路径。高光谱和 RGB 数据批量处理;LiDAR 和热红外数据在样本上调好参数后,在整个调查批次中复用。推荐流程保证每一步都可检查:

  1. 原样归档原始数据和采集元数据;
  2. 打开代表性样本,确认文件配对、方向和单位;
  3. 在预览中调参,并检查困难样本;
  4. 先处理一小批并与原始数据比对,再扩大规模;
  5. 将阈值、体素大小、聚类参数和软件版本与结果一并保存。

局限性​

各模块分别处理各自的模态,模态之间尚未配准。结果受标定、地面选取、点密度、遮挡和阈值影响,因此每个模块都开放参数并提供预览。后续工作包括跨模态配准、跨调查批次的时间序列分析、统一的项目配置模板,以及服务器端批量处理与报告。