跳到主要内容
On this page
Research notebook

MCTP:一个多模态作物表型工作台

一个用于高光谱、LiDAR、RGB 和热红外作物表型工作流的桌面工作台,在共享 UI 与跨模态融合之间有清晰边界。

概述

MCTP 桌面启动器与四个模态模块

MCTP(多模态作物表型平台) 是一个桌面数据处理工作台,在与舒丰生物的田间表型合作中开发。本人的贡献集中在系统优化以及数据处理与分析工作流上。

该界面把高光谱、LiDAR、RGB 和热红外工具聚合到一个启动器中。在本项目快照中,“统一”指的是一致的入口、交互模式和导出约定。它并不意味着四个模态被自动配准、融合或由一个模型解释。

项目快照

本文描述的是由可用界面和模块截图所代表的版本。确切的输入格式和输出应在用于具体实验的构建版本中确认。

当前模块范围

高光谱处理

显示光谱图像分析视图的高光谱模块

高光谱工作流围绕成对的 ENVI 文件和波长元数据设计。其项目实现包括:

  • HDR/SPE 读取和波长解析
  • RGB 快视图和植被指数视图
  • 基于阈值的植株掩膜和眩光滤除
  • 以 CSV/JSON 形式导出的均值光谱和汇总
  • 针对兼容数据集的目录级处理

指数值和掩膜依赖有效的辐射定标元数据和合适的阈值。在下游统计分析之前应予以检查。

LiDAR 处理

用于点云加载和预处理的 LiDAR 模块

LiDAR 分割与性状调参界面

LiDAR 模块汇集了常见的点云准备和性状提取操作:

  • PLY、LAS、LAZ 和文本文件输入
  • 地面重置基准、体素下采样、裁剪和高度着色
  • 基于 DBSCAN 的聚类,支持交互式参数调节
  • 覆盖度、高度百分位、占用率和凸包汇总
  • 裁剪点云和 JSON 报告导出

这些输出是算法估计。地面选择、点密度、遮挡和聚类参数都会在实质上改变结果。

RGB 处理

RGB 工作流把颜色指数阈值化与形态学和连通分量操作结合。项目实现使用 ExG、CIVE 和 VDI 特征,随后应用清理和实例标注步骤,用于组级和单株级汇总。

这种经典计算机视觉方法透明且可调,但它对光照、反光、标签、土壤颜色和重叠植株敏感。在批处理之前应检查一个有代表性的子集。

热红外处理

带阈值控制和热图预览的热红外模块

热红外工作流把图像和温度矩阵输入配对,然后提供阈值和形态学控制,以及叠加图、热图和仅植株预览。视模块构建版本而定,输出可包括图像、数组、表格和 JSON 汇总。

只有当相机导出、朝向、定标和环境假设都正确时,温度值才有意义。

推荐工作流

  1. 先归档原始数据。 保持原始文件和采集元数据不变。
  2. 打开一个代表性样本。 确认文件配对、朝向、单位和坐标约定。
  3. 可视地调节参数。 用预览识别失败案例,而非依赖默认值。
  4. 处理一个小批次。 在扩大规模前对照原始数据检查输出。
  5. 记录配置。 把阈值、体素尺寸、聚类设置和软件版本与结果一起保存。

平台边界

可用的项目快照应被视作一组模态相关的处理工具,而不是一个自主的科学解释系统。

  • 跨模态配准和时间分析不是当前自动能力。
  • 批处理行为因模块而异;交互式调节对 LiDAR 和热红外数据仍然重要。
  • 结构化导出改善了向 R、Python 或其他统计工具的交接,但不能取代质量控制。
  • 本快照未记录任何云处理服务。
  • 可复现性要求把原始数据、模块版本、参数、定标信息和导出结果一起保存。

下一步开发优先级

潜在的未来工作包括共享的项目配置文件、明确的溯源记录、跨模态配准和经过验证的时间分析。这些是开发方向,而非对当前版本的声明。

DISCUSSION

Questions or field notes?