The following article is from 格致论道讲坛 Author 孙赫
中国科学院计算机网络信息中心与中国科学院科学传播局联合主办的科学文化讲坛,每月一期线下活动,分享科技文化新知、观点和思想!
我会不断努力开发新的计算成像技术,
不断突破极限,
拍摄到更多极端尺度下的神奇世界。
今天的故事就先从这张照片说起,这是位于银河系中心的超大质量黑洞的第一张照片。
给黑洞拍照肯定不是一件容易的事,我们是怎么得到这张照片的呢?用来给黑洞拍照的是一个超级相机,叫做“事件视界望远镜”。
事件视界望远镜与其说是一个仪器,更准确地说是由来自全球80多个科研机构的300多名科研人员组成的合作组织。
很荣幸,我作为其中一员参与到了银河系中心黑洞的拍摄工作。这是我们当天线上发布会的截屏。
银河系中心黑洞成像的过程中也有我们中国科学家的工作,有17名来自中国大陆的科学家全程参与其中。
为什么给黑洞拍照这么难呢?我们为什么不能像拍月亮一样,拿手机去给黑洞拍照呢?
一句话总结就是,地球距离我们想看的银河系中心的黑洞实在是太远了。打个比方,我们在地球观测银河系中心,难度大概就相当于在拉萨的布达拉宫去观察位于上海外滩餐厅桌子上的一粒盐。
▲理想情况下的黑洞观测望远镜(图像来源:EHT Collaboration)
如果要实现这样非常高精度的观测,根据公式计算,我们需要造一个有地球大小口径的射电望远镜才能够实现。这当然是不切实际的。
▲2017年的事件视界望远镜(视频来源:EHT Collaboration)
但是,一个有意思且非常有用的想法就是,可以利用计算成像技术,把全球的8台望远镜联合起来,协同拍摄银河系中心的黑洞,就能够达到类似地球大小口径的射电望远镜的成像效果。这就是我们所说的事件视界望远镜的含义。
它的原理是,虽然我们不能用一个小的望远镜来代替大的望远镜的工作机制,但是在射电干涉中,任意两台望远镜之间的连线,就可以获得一组对黑洞的观测数据。这一组数据所包含的信息,和两台望远镜之间连线的投影距离、朝向密切相关。
其实很多时候,这8台望远镜两两连线所拥有的信息也是非常少的。但是一个非常有趣、并且是天助我也的事就是,地球本身是在自转的。随着地球整晚不断自转,每两台望远镜之间连线的投影距离和朝向也会发生些微的变化。
▲左:室女A星系中心黑洞(M87*),2019
右:银河系中心黑洞(SgrA*),2022
为概率成像“提速”
但比较麻烦的是,我们面临一个挑战:银河系中心黑洞的质量仅相当于M87黑洞质量的1/1000,所以它的动态变化是非常快的。我们拍照的过程,就像在观察天气剧烈变化下的风景。
那传统上,我们是怎么实现这种黑洞的概率成像呢?简单来说就是——猜。
在人工智能和深度学习中,我找到了一些灵感。我们用了深度学习中的一个非常特殊的神经网络,叫做“深度生成模型”,来解决这个问题。这个深度生成模型的厉害之处在于,它可以生成任意符合我们人类预期的自然图像。
比如说,这里的两张图,一张图是真实的人脸照片,另外一张图是用深度生成模型生成的人脸照片。我不知道大家能不能看出来哪个是真的,哪个是假的?就我个人来看,我真的觉得非常难区分。
正确答案是,左边这个男生的照片是真的。
▲左:平均图片
右:不确定性图片
利用这个方法,我们首先在已经发布的M87黑洞图片上做了验证。大家看到的就是深度概率成像所得到的平均图片和不确定性图片。
▲M87* Paper-IV, EHT Collaboration, ApJL 2019
有了这样的验证,我们就更有底气了。所以深度概率成像算法,作为事件视界望远镜成像工作组的分析算法,参与到了银河系中心黑洞的分析工作中。
让黑洞的图像动起来
▲SgrA* Paper-III, EHT Collaboration, ApJL 2022
但是,深度概率成像算法,为科学家做出科学解释提供了非常重要的依据。虽然我们现在还没有办法解答银河系中心黑洞动态到底是什么样的,但是我相信在不久的将来,随着我们有更好的仪器,更好的分析方法,肯定很快就能看到银河系黑洞本身的动态真容。
用计算成像探索生命奥秘
但是它也有缺点。磁共振成像的扫描时间是非常长的,所以如果大家去医院预约磁共振,可能要等非常久。也正是这个原因,它的收费是非常昂贵的。
磁共振成像的物理原理,跟黑洞成像其实非常类似。既然可以用非常稀疏的数据重构出黑洞的图像甚至视频,那么自然也可以利用比较稀疏的、快速的扫描,来对人体进行磁共振成像。
这是我们利用深度学习,对磁共振成像进行加速扫描的模拟结果。这里模拟了磁共振对人体膝盖的观测,但是我们只用了相当于传统扫描的大概1/4的时间。中间这张图是我们得出的结果,利用深度学习算法,至少在模拟中打败了当前最优的算法。
虽然用的时间更少了,我们仍然可以得到诊断所需要的观测结果和人体结构知识。利用这种计算成像方法,我相信在不久的将来,磁共振就会变得非常便宜,而且也没有那么耗时,可以作为更普适的医疗技术被更多人应用。
当然也不仅仅是核磁共振,在整个生物医学成像中,计算成像都有非常重要的应用。
我们的人体是一个非常非常复杂的系统,小到分子细胞,大到人体,从纳米、微米、到米,是跨越了九个尺度的非常复杂的系统。要观测这样一个系统,就要从多个尺度对人体进行成像。
▲人体尺度:磁共振成像
比如说,要了解记忆产生的机制,肯定需要在人体尺度用医疗成像仪器对脑结构进行成像。
▲细胞尺度:双光子显微镜
同时,还需要利用显微镜,在微观尺度对神经元进行成像。
▲分子尺度:冷冻电镜
Doreen Matthies et al. ,2018
在更小的尺度——分子尺度,我们还需要利用电子显微镜技术,去了解整个生命过程背后的物理物质基础,去观测决定生命性状的蛋白质。
从磁共振、到显微镜、再到冷冻电镜,这里每一种成像方式,都需要计算成像来辅助,让它们变得更加清晰、准确。
我们要实现生命的全尺度观测,自然是需要各种成像方法的协同,一起来揭示整个生命的奥秘。我现在的工作单位——北京大学国家生物医学成像科学中心,就是要完成这个事。
▲多模态跨尺度生物医学成像设施
我们要给生命拍照的超级相机,叫做“多模态跨尺度生物医学成像设施”。它坐落在北京的怀柔科学城,集合了接近100位成像领域的专家。他们分别从人体医学成像尺度、细胞的尺度、还有分子的尺度,去研发先进的成像设备,从而实现对人体全尺度的生命现象的观测。
这个大设施尤其独具匠心的设计在于,除了刚才提到的医学成像设施、细胞成像设施、分子成像设施,还有一个专门设置的全尺度的数据处理中心。我们希望在这里利用计算技术,不仅对生物医学的成像方式进行图像增强,同时还能够利用深度学习信号处理等先进的计算技术,对不同尺度的生命现象进行融合,从而实现单一成像方法所不能看到的生命全景观测。
我们常说眼见为实,成像技术很多时候就可以被看作科学家的“眼睛”。计算成像技术的不断发展,让科学家们的眼睛更加敏锐。从宏大的宇宙到人体中微小的细胞,都蕴含着各种各样的奥妙。我非常荣幸能够参与到这样一些相关的科研工作中。
希望今天通过我的讲述,大家也能够理解计算成像技术的神奇之处。我也会不断努力开发新的、更好的计算成像技术,不断突破极限,来用计算成像技术拍摄到更多极端尺度下的神奇世界。
谢谢大家!
文章和演讲仅代表作者观点,不代表格致论道讲坛立场。
本文转载自《格致论道讲坛》微信公众号