||
MorphOTU: 基于图像的开放集生物多样性形态学操作单元框架
作者:
doi:
参考:https://mp.weixin.qq.com/s/bSuxjNXAuFxw7NeEvedr5Q
注意:This article is a preprint and has not been certified by peer review
一、关键科学问题该论文聚焦的核心科学问题是:在分类学障碍(taxonomic impediment)和大量物种"未命名"的现实条件下,如何建立一个不依赖DNA、不依赖封闭集(closed-set)专家标签,仅凭图像即可量化表型多样性的可扩展系统?具体而言:传统形态分类依赖专家、通量低;分子条形码(DNA barcoding/metabarcoding)虽可扩展但依赖实验室基础设施且无法直观映射回形态;现有计算机视觉方法多为有监督闭集分类,无法处理开放生态系统中大量"未见过"的物种。论文提出,克服这一困境需要转变视角:表型多样性可以在连续的形态空间内直接测量,独立于物种身份,从而构建类似分子OTU的"形态学操作单元"(morphOTU)。 bioRxiv
二、主要研究思路研究团队提出了一个两阶段框架"OTU-Former":
表征学习阶段:结合自监督学习(教师-学生ViT架构,EMA更新、多裁剪增强、全局/局部对比损失与掩码token预测)与ArcFace度量学习微调,将原始标本图像转化为固定维度的"形态学条形码"(高维嵌入向量)。
聚类与阈值扫描阶段:基于嵌入空间的成对余弦距离构建UPGMA系统树,采用"动态阈值扫描"策略(粗扫+细扫两步),结合谱系特异性距离区间,将连续形态空间划分为离散的morphOTU,并生成基于丰度的多样性数据(物种丰富度、Shannon指数)。
可解释性验证:利用Score-CAM类激活图,定位模型关注的诊断性形态特征(如体轮廓、雕刻纹理、花部对称性、木材导管结构),辅助专家核验聚类边界的生物学合理性。
研究在五个植物/甲虫数据集(Flowers-102、WOOD、ZZH-Lucaninae、Rove-Tree-11、NHM-Carabids,2千至6.3万张图像,7-291个分类单元)上系统评估了该框架在闭集、开放集、稀疏标注、有限样本量及跨谱系迁移等多种现实场景下的表现。
三、主要技术挑战缺乏"条形码间隙"(barcoding gap):与分子距离不同,形态距离的余弦距离分布并未呈现单一、离散的分离区,而往往只有浅沟,反映出谱系特异的形态分化差异,因此无法采用单一全局阈值划分物种边界,必须使用谱系自适应的动态阈值。 bioRxiv
开放集泛化与未见物种:当训练集中未见物种比例提升(25%、50%、75%)时,嵌入质量(LP准确率、mAP、ARI)显著下降,尤其在低质量图像数据集(如NHM-Carabids)上更明显。
标注稀缺与样本量限制:当每物种图像数降至10张以下时性能急剧下降;监督微调所需标注比例可压缩至10%-25%仍保持较好效果,但存在下限。
图像质量与跨谱系迁移:图像质量差(背景不一、光照/分辨率不均)显著降低自监督表征学习效果;模型在不同甲虫谱系间直接迁移性能有限,需要在目标谱系上重新微调(SSL_newSFT)才能恢复聚类与检索性能。
形态标记单一性:仅依赖单一外部视角(如背面观)难以捕捉某些谱系的全部诊断性状。
morphOTU能够在五个跨异质成像条件的植物和甲虫数据集上恢复物种级边界,在训练中大多数物种"未见"的情况下仍保持连贯结构,并在稀疏标注或有限采样条件下准确逼近丰富度和Shannon多样性指数。 bioRxiv
可视化解释显示,morphOTU始终聚焦于具有生物学意义的性状,并能捕捉连续的表型变异。 bioRxiv
自监督+监督微调(SSL+SFT)的嵌入质量在闭集条件下可接近全监督水平,且在开放集、稀疏标注、跨谱系迁移等多种受限场景下比纯监督学习(SL)更稳健。
单一距离阈值无法可靠界定morphOTU边界,但基于动态、谱系特异性阈值生成的群落级多样性指标依然稳健,证明形态驱动的OTU构建具有现实可行性。
通过整合自监督特征学习与谱系特异性聚类,可将原始图像转化为标准化、基于丰度的morphOTU,减少对专家标注的依赖,使形态学层面的生物多样性评估达到此前无法企及的规模,这一转变与二十年前DNA条形码和元条形码技术对分子生态学的变革性影响相似。 bioRxiv
数据规模和分类覆盖有限:当前五个数据集均属中小规模(2千-6.3万图像),且仅覆盖植物花部、木材切面与甲虫背面三类标准化视角,泛化性有待在更广泛类群和成像条件下验证。
单一外部标记的局限:依赖单一视角(如背面观)难以涵盖某些谱系全部诊断性状,论文自身承认需要多视角、多形态标记或3D/多视图技术来提升分辨率。
变态发育类群尚未解决:对于幼体与成体形态差异巨大的完全变态昆虫,该框架的适用性仍是未解难题。
图像质量依赖性强:自监督表征学习对标准化、高质量图像依赖明显,低质量图像(如NHM-Carabids)显著拖累聚类清晰度。
阈值划分仍需专家介入:动态阈值扫描虽缓解了固定阈值问题,但理想情况下最终判定仍需结合专家评估或CAM引导,自动化程度有限。
模型规模与算力定位中等:OTU-Former针对中小规模数据集和可及硬件优化,尚未验证在大规模全球生物多样性影像上训练通用基础模型的效果。
Hebert, P.D.N. et al. (2003) — DNA条形码方法的奠基性论文
Taberlet, P. et al. (2012) — 环境DNA元条形码(metabarcoding)
Hansen, O.L.P. et al. (2020) — NHM-Carabids数据集及深度学习鉴定甲虫
Hoagland, K.E. (1996); Evenhuis, N.L. (2007); Hortal, J. et al. (2015) — "分类学障碍"概念
Caron, M. et al. (2021)(DINO); Oquab, M. et al. (2023)(DINOv2/v3相关)— 自监督视觉表征学习
Deng, J. et al. (2022) — ArcFace度量学习
Dosovitskiy, A. et al. (2020) — Vision Transformer (ViT)
McInnes, L., Healy, J. & Melville, J. (2018) — UMAP降维可视化
Hunt, T. & Pedersen, R. (2022) — Rove-Tree-11数据集
Zhou, B. et al. (2015); Wang, H. et al. (2019) — 类激活图(CAM)/Score-CAM可解释性方法
多视角与多模态整合:结合背面、侧面等多视角图像,或3D/多视图成像技术,提升morphOTU对复杂谱系诊断性状的捕捉能力。
大规模通用视觉基础模型:随着视觉基础模型不断发展,整合在全球生物多样性影像上训练的更大、更具泛化能力的编码器,构建真正"通用"的形态表征。
形态-分子融合体系:morphOTU与分子OTU的整合,形成兼顾表型与基因型维度的统一全球生物多样性评估框架,morphOTU可用于快速初筛并指引靶向测序。
应用场景拓展:用于生态观测站的实时表型监测、博物馆海量馆藏标本的大规模数字化重新鉴定,以及入侵物种/新发害虫的早期预警系统。
变态发育与多生活史阶段建模:将该框架扩展至幼体-成体形态差异巨大的完全变态类群。
标准化成像协议建设:鉴于图像质量对嵌入质量影响显著,未来需要推动生物多样性影像采集的标准化,以充分发挥自监督学习的潜力。
Hebert, P.D.N., Cywinska, A., Ball, S.L., deWaard, J.R. (2003). Biological identifications through DNA barcodes. Proc. R. Soc. B.
Taberlet, P., Coissac, E., Pompanon, F., Brochmann, C., Willerslev, E. (2012). Towards next-generation biodiversity assessment using DNA metabarcoding. Mol. Ecol.
Caron, M. et al. (2021). Emerging Properties in Self-Supervised Vision Transformers (DINO). ICCV.
Oquab, M. et al. (2023). DINOv2: Learning Robust Visual Features without Supervision. arXiv.
Hansen, O.L.P. et al. (2020). Species-level image classification with convolutional neural network enables insect identification from habitus images. Ecol. Evol.
Deng, J., Guo, J., Xue, N., Zafeiriou, S. (2019/2022). ArcFace: Additive Angular Margin Loss for Deep Face Recognition. CVPR.
Hunt, T., Pedersen, R. (2022). Rove-Tree-11: The Not-so-Wild Rover a Hierarchically Structured Image Dataset for Deep Metric Learning Research. NeurIPS Datasets and Benchmarks.
Mora, C., Tittensor, D.P., Adl, S., Simpson, A.G.B., Worm, B. (2011). How Many Species Are There on Earth and in the Ocean? PLoS Biol.
Stevens, S.N. et al. (2023/2024). BIOCLIP / zero-shot biodiversity image classification 相关研究(基础模型用于物种识别)。
Pearman, J.K. et al. (2016). Please mind the gap: Visual census and cryptic biodiversity assessment at central Red Sea coral reefs. Mar. Environ. Res.(形态OTU在生态调查中的传统应用案例)
需要说明的是,该论文为2026年发表的bioRxiv预印本(DOI: 10.64898/2026.04.28.721370),尚未经过同行评审,相关结论和数据应以最终正式发表版本为准。
Archiver|手机版|科学网 ( 京ICP备07017567号-12 )
GMT+8, 2026-7-1 18:14
Powered by ScienceNet.cn
Copyright © 2007- 中国科学报社