MCTP:一个多模态作物表型工作台
一个用于高光谱、LiDAR、RGB 和热红外作物表型工作流的桌面工作台,在共享 UI 与跨模态融合之间有清晰边界。
Liangchao DengPostdoctoral Researcher概述

MCTP(多模态作物表型平台) 是一个桌面数据处理工作台,在与舒丰生物的田间表型合作中开发。本人的贡献集中在系统优化以及数据处理与分析工作流上。
该界面把高光谱、LiDAR、RGB 和热红外工具聚合到一个启动器中。在本项目快照中,“统一”指的是一致的入口、交互模式和导出约定。它并不意味着四个模态被自动配准、融合或由一个模型解释。
本文描述的是由可用界面和模块截图所代表的版本。确切的输入格式和输出应在用于具体实验的构建版本中确认。
当前模块范围
高光谱处理

高光谱工作流围绕成对的 ENVI 文件和波长元数据设计。其项目实现包括:
- HDR/SPE 读取和波长解析
- RGB 快视图和植被指数视图
- 基于阈值的植株掩膜和眩光滤除
- 以 CSV/JSON 形式导出的均值光谱和汇总
- 针对兼容数据集的目录级处理
指数值和掩膜依赖有效的辐射定标元数据和合适的阈值。在下游统计分析之前应予以检查。
LiDAR 处理


LiDAR 模块汇集了常见的点云准备和性状提取操作:
- PLY、LAS、LAZ 和文本文件输入
- 地面重置基准、体素下采样、裁剪和高度着色
- 基于 DBSCAN 的聚类,支持交互式参数调节
- 覆盖度、高度百分位、占用率和凸包汇总
- 裁剪点云和 JSON 报告导出
这些输出是算法估计。地面选择、点密度、遮挡和聚类参数都会在实质上改变结果。
RGB 处理
RGB 工作流把颜色指数阈值化与形态学和连通分量操作结合。项目实现使用 ExG、CIVE 和 VDI 特征,随后应用清理和实例标注步骤,用于组级和单株级汇总。
这种经典计算机视觉方法透明且可调,但它对光照、反光、标签、土壤颜色和重叠植株敏感。在批处理之前应检查一个有代表性的子集。
热红外处理

热红外工作流把图像和温度矩阵输入配对,然后提供阈值和形态学控制,以及叠加图、热图和仅植株预览。视模块构建版本而定,输出可包括图像、数组、表格和 JSON 汇总。
只有当相机导出、朝向、定标和环境假设都正确时,温度值才有意义。
推荐工作流
- 先归档原始数据。 保持原始文件和采集元数据不变。
- 打开一个代表性样本。 确认文件配对、朝向、单位和坐标约定。
- 可视地调节参数。 用预览识别失败案例,而非依赖默认值。
- 处理一个小批次。 在扩大规模前对照原始数据检查输出。
- 记录配置。 把阈值、体素尺寸、聚类设置和软件版本与结果一起保存。
平台边界
可用的项目快照应被视作一组模态相关的处理工具,而不是一个自主的科学解释系统。
- 跨模态配准和时间分析不是当前自动能力。
- 批处理行为因模块而异;交互式调节对 LiDAR 和热红外数据仍然重要。
- 结构化导出改善了向 R、Python 或其他统计工具的交接,但不能取代质量控制。
- 本快照未记录任何云处理服务。
- 可复现性要求把原始数据、模块版本、参数、定标信息和导出结果一起保存。
下一步开发优先级
潜在的未来工作包括共享的项目配置文件、明确的溯源记录、跨模态配准和经过验证的时间分析。这些是开发方向,而非对当前版本的声明。

DISCUSSION
Questions or field notes?