CytoSPM: Open-Vocabulary Cytopathology Detection with Structured Prompt Bank
作者: Wenjie Li, Zishan Xu, Jinyang Huang, Zhengxin Nie, Shichao Kan, Yixiong Liang
分类: cs.CV
发布日期: 2026-09-25
💡 一句话要点
提出CytoSPM以解决细胞病理学开放词汇检测问题
🎯 匹配领域: 支柱三:空间感知与语义 (Perception & Semantics)
关键词: 细胞病理学 开放词汇检测 多领域基准 结构化提示 高效推理
📋 核心要点
- 现有细胞病理学检测方法多为单一领域且封闭集,无法有效应对细胞类别的多样性和演变。
- 论文提出CytoSPM,采用解耦的两阶段设计,首先提取类无关的视觉表示,再进行结构化提示匹配。
- 在PentaCyto基准上,CytoSPM在新类别和开放词汇检测中表现优异,推理效率高于现有方法。
📝 摘要(中文)
细胞病理学检测需要开放词汇识别,因为细胞类别细粒度、长尾且在不同器官系统中不断演变。然而,现有的细胞学检测器大多是单一领域和封闭集的,且尚无统一的基准来评估开放词汇细胞病理学检测。我们提出了PentaCyto,这是一个涵盖宫颈、尿液、呼吸、浆液和甲状腺细胞学的多领域基准,包含24个基础类别和9个保留的新类别。每个类别都与描述诊断形态特征的结构化细胞形态提示相关联,并提供临床基础的文本知识。我们进一步提出了CytoSPM,这是一种基于解耦的两阶段设计的高效检测器。它首先提取可重用的类无关视觉表示,然后进行类感知的结构化提示匹配。在PentaCyto上,CytoSPM在新类别检测和开放词汇检测方面超越了现有方法,同时保持高效推理。
🔬 方法详解
问题定义:本论文旨在解决细胞病理学检测中的开放词汇识别问题。现有方法主要集中于单一领域和封闭集,无法适应细胞类别的细粒度和不断演变的特性。
核心思路:CytoSPM的核心思路是通过解耦的两阶段设计,首先提取类无关的视觉表示,然后利用结构化提示进行类感知的匹配。这种设计使得检测器能够适应多样化的细胞类别。
技术框架:CytoSPM的整体架构包括两个主要阶段:第一阶段是提取可重用的类无关视觉特征,第二阶段是进行类感知的结构化提示匹配。该框架支持多领域的细胞病理学检测。
关键创新:CytoSPM的主要创新在于其解耦的两阶段设计,使得检测器在处理开放词汇时具备更高的灵活性和准确性。这与现有方法的单一领域和封闭集设计形成了鲜明对比。
关键设计:在关键设计上,CytoSPM使用了结构化的细胞形态提示,这些提示与类别名称相结合,提供了丰富的诊断信息。此外,网络结构和损失函数的设计也经过精心调整,以优化检测性能。
🖼️ 关键图片
📊 实验亮点
在PentaCyto基准上,CytoSPM在新类别检测中表现出色,准确率提升了XX%,在开放词汇检测中超越了现有方法,展示了其高效推理能力和优越性能。
🎯 应用场景
该研究的潜在应用领域包括医学影像分析、自动化病理学诊断和临床决策支持。CytoSPM的高效检测能力能够帮助病理学家更快速、准确地识别细胞类别,从而提高诊断效率和准确性,具有重要的临床价值和未来影响。
📄 摘要(原文)
Cytopathology detection requires open-vocabulary recognition because cellular categories are fine-grained, long-tailed, and continuously evolving across different organ systems. However, existing cytology detectors are mostly single-domain and closed-set, and there is still no unified benchmark for evaluating open-vocabulary cytopathology detection. We present PentaCyto, a multi-domain benchmark covering cervical, urinary, respiratory, serous fluid, and thyroid cytology, with 24 base categories and 9 held-out novel categories. Each category is associated with structured cytomorphology prompts that describe diagnostic morphological attributes and provide clinically grounded textual knowledge. We further propose CytoSPM, an efficient detector based on a decoupled two-stage design. It first extracts reusable class-agnostic visual representations, and then performs class-aware structural prompt matching with class names and cytomorphology prompts. On PentaCyto, CytoSPM outperforms existing methods in novel-category detection and open-vocabulary detection while maintaining efficient inference.