陕西研发fb-clip 诊断工业缺陷检测新方法

最近,一个陕西的科研团队开发了一种新方法,叫FB-CLIP,专门用来在没有异常样本的情况下检测出异常。你知道吗?工业质检和医学影像分析里,自动检测异常这事儿挺急的。但是问题来了,异常样本很少,而且收集起来不容易,传统方法根本搞不定。所以大家都很期待有个新办法。这次,这个团队说他们搞出来了FB-CLIP。他们说这个方法可以让模型更精准地找到目标区域,更灵活地理解异常语义,还有就是判断起来更准确。FB-CLIP是基于CLIP模型改进的。CLIP是个视觉—语言模型,听起来挺厉害吧?不过它虽然有零样本检测的潜力,但它依赖于大量预训练知识。所以在面对精细异常检测任务时,有时候就有点力不从心了。前景目标和背景分不开、单一文本描述不清异常类型、图像和文本语义匹配不准这些问题都挺让人头疼的。王荃团队长期关注计算机视觉和生物医学成像、脑机智能这些交叉领域,研究成果还挺多的。他们这次的研究得到了陕西省技术创新引导计划项目、湖北省自然科学基金资助、中国科学院还有西安市重点实验室支持。团队成员胡明介绍说:“我们这个FB-CLIP框架就把前景目标和背景分开了,抑制背景干扰,让模型更专注于异常区域;还在文本建模上用多种策略提取特征;跨模态对齐的时候引入语义一致性原则来提高匹配可信度。”实验结果显示这个方法在工业检测和医学影像数据集上表现很棒,特别在异常定位方面很牛。“下一步我们计划和武汉大学中南医院合作验证一下。”胡明告诉记者。“这次研究给医学影像辅助诊断和工业缺陷检测领域带来了希望。”。