高信噪比、高分辨率的显微图像总是蕴含着更丰富、更准确的信息,帮助我们以更加精确的视角认知微观世界。然而,受多种生物物理、生物化学、物理光学因素(如荧光标记浓度、探针亮度、光毒性、光漂白、光子噪声等)的限制,传统超分辨显微成像技术在提升空间分辨率的同时,往往会牺牲成像时程、速度等其他重要性能。针对这一问题,清华大学戴琼海/李栋合作团队曾于2021年提出傅里叶注意力超分辨方法(DFCAN),仅使用单张低分辨率图像即可实现高保真超分辨预测。此后,多种单张显微图像超分辨(Single image super-resolution,SISR)模型被提出,用以拓展活体超分辨显微成像的性能。然而,这些SISR模型在实际应用于活体显微成像实验(通常表现为时序数据)时,往往存在两个重要局限:第一,SISR模型无法捕捉相邻帧之间的时间相关性,可能产生时间不一致的推理结果;第二,当前SISR方法缺乏对输出结果的准确置信度评估,因而生物学家无法判断其产生的结果是否可信。
针对上述局限,1月29日,清华大学自动化系戴琼海院士、乔晖副教授团队联合清华大学生命学院李栋团队以“置信度可准确量化的长时程超分辨活细胞成像神经网络”(A neural network for long-term super-resolution imaging of live cells with reliable confidence quantification)为题在《自然·生物技术》(Nature Biotechnology)杂志发表研究论文。团队利用自主开发的多模态结构光照明超分辨显微镜(Multi-modality Structured Illumination Microscopy)构建了高质量的时序超分辨显微图像公开数据集BioTISR,并基于对现有时序图像超分辨(Time-lapseimage super-resolution,TISR)方法的系统测评,提出了可变形相空间校准机制(Deformable phase-space alignment,DPA)及相应的TISR模型(DPA-TISR),该模型可对低信噪比、低分辨率的时序图像进行高保真度超分辨重建,将多色活体超分辨成像时程拓展30倍以上、延长至上万时间点;进一步地,团队将贝叶斯学习与DPA-TISR结合,提出了贝叶斯时序图像超分辨神经网络(Bayesian DPA-TISR),并设计了一种期望校正误差(Expected calibration error,ECE)最小化方法,从而对DPA-TISR的输出结果进行准确的置信度评估,帮助生物学家进行更可信的定量研究。
图1.相空间时序图像校准机制示意图
研究团队首先构建了一个大规模、高质量的时序超分辨图像数据集BioTISR,并利用这一数据集对TISR方法的两个关键组成部分,即传播机制(propagation)和校准机制(alignment)进行了全面、系统的测评。测评结果表明,现有方法中最先进的可变形卷积校准机制依然无法合理捕捉相邻帧中生物结构的全局、大幅位移,导致整体超分辨重建并不理想。针对这一问题,团队设计了一种以相空间校准(图1)为基础的时间序列图像超分辨神经网络模型DPA-TISR,该模型能够在相位域中自适应地增强跨帧对齐能力,并且实现了当前最优的TISR性能。BioTISR数据集与DPA-TISR模型共同为超分辨显微成像领域建立了一个时序显微图像超分辨模型的平台(benchmark)与基准(baseline),将进一步推动AI社区与光学显微成像领域的深度融合与交叉创新。
图2.时间序列图像超分辨贝叶斯神经网络
在DPA-TISR模型的基础上,研究团队针对图像超分辨神经网络的不确定性与置信度未知难题,引入了贝叶斯学习与蒙特卡洛随机丢弃策略,提出了贝叶斯时序图像超分辨神经网络(Bayesian DPA-TISR)(图2),并针对贝叶斯学习常见的“过度自信”问题,设计了一种期望校正误差最小化方法,通过迭代线性搜索和二项式拟合对神经网络进行微调,使得所预测的置信度图与实际误差尽可能匹配,从而将模型期望校正误差降低5倍以上,可靠地指示模型潜在的推理错误。
图3.对线粒体与过氧化物酶体相互作用进行分类和评估
Bayesian DPA-TISR准确的置信度量化能力可以助力更加严谨的生命科学研究。例如,过氧化物酶体(PO)是一种频繁与线粒体接触以调节细胞活性氧代谢的功能性细胞器,然而受限于观测手段,线粒体-过氧化物酶体相互作用的类型和比例至今未被系统研究。借助DPA-TISR的高速、长时程、超分辨成像能力,研究团队能够清晰地分辨出两种细胞器空间关系与互作机制(图3),进而发现几乎一半PO从未与线粒体发生接触,同时另一半曾与线粒体互作的PO可以分为三类:17%的PO与单个线粒体的接触位点稳定关联;8%的PO同时连接两个或更多的线粒体,充当桥梁的作用;11%的PO随机地改变其与线粒体的接触位点,充当细胞内信使的角色。特别地,最后7%的PO类型被划分为不确定,因为Bayesian DPA-TISR警示图像在该区域的置信度过低,无法进行可信的行为分类(图3h)。这一研究表明,Bayesian DPA-TISR可以为超长时程活细胞超分辨成像以及置信度可量化的生物分析提供全新的技术路径和广泛的应用基础。
清华大学自动化系博士后乔畅、博士生刘书然、徐闻聪、清华大学信息科学与技术国家研究中心副研究员王玉旺为论文共同第一作者。清华大学自动化系、清华大学信息科学与技术国家研究中心、脑与认知科学研究院戴琼海教授、乔晖副教授,清华大学生命科学学院李栋教授为论文共同通讯作者。研究得到国家自然科学基金、国家重点研发计划、北京市自然科学基金、腾讯新基石科学基金、清华大学水木学者、中国博士后科学基金的资助。
论文链接:
https://www.nature.com/articles/s41587-025-02553-8
近日,全国教育信创与密码行业产教融合共同体成立大会及新疆职业院校产教融合人才培养论坛于在乌鲁木齐举办。 航天 中新网12月20日电 据台湾中天新闻网报道,新党桃园市“立委”参选人游智彬19日揭露,台南“立委”陈亭妃博士论文涉嫌抄 12月16日,国家教育宏观政策论坛2023年会暨上海教育督导论坛在华东师范大学举行。华东师范大学党委书记、国家教育宏 12月18日23时59分,甘肃省临夏回族自治州积石山保安族东乡族撒拉族自治县发生6.2级地震,震源深度10公里。截至19日16时,此次 编译 | 杜珊妮 美国高等教育的毕业率已经陷入了长达3年的停滞,辍学率常年维持在29%。这一令人震惊的数据由美国国家学生 “科学探索奖”5周年之后再出发。作为目前国内金额最高的青年科技人才资助计划之一,第六届“科学探索 。本文链接:清华团队开发置信度可量化的时序显微图像超分辨方法http://www.sushuapos.com/show-11-16939-0.html
声明:本网站为非营利性网站,本网页内容由互联网博主自发贡献,不代表本站观点,本站不承担任何法律责任。天上不会到馅饼,请大家谨防诈骗!若有侵权等问题请及时与本网联系,我们将在第一时间删除处理。
上一篇: 哈工大团队为治疗脱发症药物设计提供新思路