基于视觉语言先验的开放世界东星斑个体重识别研究
部署级 FAR 6.91% · 特征维度压缩 5× · dev70 已知个体错误率 20.10% → 14.65%(相对优化 27%) · dev70 未知鱼误接收率 25.90% → 20.75%(相对优化 20%)
以 CLIP-ReID 为基座,做特征压缩与开放集拒识一体化设计;身份错误率优化27%,达成单鱼阶段工程冻结标准
- Compact256 投影层实现 5 倍维度压缩
- QACM 实现已知识别与未知拒识一体化
- 自建 92 身份、万余张图像数据集
背景
水产养殖场景下需要长期追踪东星斑个体,但个体外观差异细微、水下成像质量波动大,且实际部署中新个体与未注册个体持续出现,闭集识别假设不成立。
目标
在视觉语言先验基础上构建一套既能识别已知身份、又能拒绝未知个体的开放世界识别方法,并把模型压缩到可部署规模。
行动
基于 CLIP-ReID 设计 Compact256 投影层,将特征维度压缩至 1/5;提出 QACM 质量感知身份原型机制,把图像质量估计融入身份原型建模,实现已知识别与未知拒识一体化;构建覆盖 92 个身份、万余张图像的东星斑个体数据集,并完成闭集评测与部署级开放集评测。
结果
本项目构建了面向开放世界鱼类个体识别的单鱼视频运行时系统,围绕轨迹级身份生命周期管理,通过Fast Warm-up、确认后身份保持、动态置信度更新等五大核心机制,解决了轨迹断裂、帧质量波动、身份冲突等场景下的稳定识别问题。