@lillyguisnet: 我博士的第四篇也是最后一篇论文终于发布了!用于生物成像分析的AI程序。我最初的博士项目需要…
摘要
一位博士生分享了关于生物成像分析AI程序的论文发布,该程序使用SAM和SAM2模型自动化科学应用中的分割和数据提取。
查看缓存全文
缓存时间: 2026/09/26 15:01
我博士阶段的第四篇也是最后一篇论文终于发表了!
这篇是关于生物成像分析的AI程序。
我的博士原始项目需要录制大量的视频和图像……但随之而来的是海量的分析工作。那些机械、耗时、需要不断点击和画圈的重复操作,我实在厌恶至极,总是拖延着不想面对。
2019年,有人告诉我:“深度学习可以自动完成这些!“我当时就想:“没错,这正是我需要的!”(笑)虽然尝试了许多定制化的UNet架构和微调模型,但效果始终达不到科研应用的精度要求。
然而转机出现在2023年。SAM模型的出现让我重新燃起了希望——其能力简直令人震撼!接着2024年推出的SAM2更是突破性地支持视频分析!
最终我以SAM模型为核心构建了这套生物成像分析系统,主要着力于优化分割流程:通过确定性校验、双重注意力裁剪提升分割质量,并辅以特征工程实现最终数据提取。
具体实现了:
- 消除图像重叠区域并排除杂质干扰
- 在极低视野占比(仅0.25%总像素)下保证高质量姿态捕捉
- 活体动物神经元活动提取(这是我最自豪的功能,在视频分析部分可见)
这套自动化系统不仅能产出更多数据,更重要的是显著提升了数据质量!
这些方案或许很快会被迭代(学界常态),效率也可能有提升空间,但我最欣慰的是证明了现有模型已能胜任大量生物成像分析任务!
减少机械操作,专注于科学探索 :)
下方展示了其他成像模态的分析案例
相似文章
2023年,我使用了SAM1结合自定义vit分类器来识别并自动化我的显微镜图像分割。
作者分享了一种使用SAM1和SAM3.1自动化显微镜图像分割的方法,通过分组相似图像并利用类似视频的传播,实现了100%的准确率。
@GitHub_Daily: 一位耶鲁大学计算机科学博士生已开源其用于论文的所有绘图脚本,该项目名为figures4papers…
一位耶鲁大学计算机科学博士生开源了名为figures4papers的绘图脚本,其中包括一个用于AI工具如Cursor和Claude Code的Skill,基于既定设计标准生成高质量学术图表。
@MaximeRivest:还有很多事情要做!我们知道深度学习有效,我们只需要更分享和有组织一些!我 sp…
作者讨论了在深度学习中需要更好的分享和组织,以使其更易于生物学家使用,从而自动化图像分析和测量等任务。
@dair_ai: 令人瞩目的新成果来自 Google DeepMind,展示了智能体在科学研究中的实际应用。
Google DeepMind 发表了一篇关于使用 AI 智能体进行实际科学研究的论文,表明它们在诸如 HealthBench Hard 的计算机科学任务中能够超越前沿模型。
@robertnishihara: 这个演讲现已上传! https://youtube.com/watch?v=Sv0wfbPp5LI…
Lila Sciences 正在开发一个集成的 AI 驱动平台,以自动化科学实验,使用 AI 模型和机器人技术来解决科学中不可验证的假设,愿景是创建科学智能的缩放定律。