在2008年1月1日凌晨1点59分,加利福尼亚州卡利帕特里亚发生了一次地震。你可能从未听说过这次地震,即使当时你就在卡利帕特里亚,也不会有任何感觉。这次地震的震级为-0.53,大约相当于一辆卡车经过时的震动强度。然而,这次地震之所以引人注目,并非因为规模大,而是因为它非常微小——而我们却能够探测到它。
过去七年中,基于计算机图像的AI工具几乎完全自动化了地震学的一项基本任务:地震检测。这项任务曾经由人类分析师完成,后来由更简单的计算机程序接手,现在则可以由机器学习工具自动快速地完成。
这些机器学习工具能够检测到比人类分析师更小的地震,尤其是在城市等嘈杂环境中。地震提供了关于地球组成和未来可能发生的灾害的宝贵信息。
"在最佳情况下,当你采用这些新技术时,即使使用相同的老旧数据,也像是第一次戴上眼镜,你可以看到树上的叶子,"Kyle Bradley说,他是《地震洞察》新闻通讯的合著者。
我与几位地震科学家交谈,他们都一致认为,在这些特定任务中,机器学习方法已经取代了人类,并且效果更好。
"这真的令人惊叹,"康奈尔大学教授、Bradley的合著者Judith Hubbard告诉我。
然而,接下来会发生什么则不太确定。地震检测是地震学的基本组成部分,但许多其他数据处理任务尚未受到颠覆。最大的潜在影响,直到地震预测,尚未实现。
"这确实是一场革命,"德克萨斯大学达拉斯分校教授Joe Byrnes说,"但革命仍在继续。"
地震学家的工作是什么?
当某地发生地震时,震动会穿过地面,类似于声波在空气中传播。在这两种情况下,都可以对波穿过的材料做出推断。
想象一下敲击一面墙来判断它是否是空心的。因为实心墙和空心墙的振动方式不同,你可以通过声音来推断结构。
地震也是如此。地震波以不同方式穿过不同材料(岩石、石油、岩浆等),科学家利用这些振动来成像地球内部。
科学家传统使用的主要工具是_地震仪_。这些设备记录地球在三个方向上的运动:上下、南北和东西。如果发生地震,地震仪可以测量特定位置的震动。
科学家随后处理原始地震仪信息以识别地震。
地震产生多种类型的震动,它们以不同的速度传播。其中两种类型——初波(P波)和次波(S波)尤为重要,科学家喜欢识别每种波的开始阶段。
机器学习之前的地震探测
在良好的算法出现之前,地震目录必须手动创建。Byrnes说:"传统上,像美国地质调查局这样的实验室会有一群主要由本科生或实习生组成的团队,他们负责查看地震图。"
然而,手动可以找到和分类的地震数量有限。有效寻找和处理地震的算法一直是该领域的优先事项——特别是在1950年代初计算机出现之后。
"地震学领域的历史发展一直与计算技术的发展同步,"Bradley告诉我。
然而,传统算法面临一个大挑战:它们不容易找到较小的地震,尤其是在嘈杂的环境中。
如上图所示,许多不同事件都可以引起地震信号。如果一种方法过于敏感,它就有可能将事件错误地检测为地震。这个问题在城市中尤其严重,那里持续不断的交通和建筑噪音可能会掩盖小地震。
然而,地震具有特征性的"形状"。例如,上图中7.7级的地震看起来与直升机降落明显不同。
因此,科学家们的一个想法是从人类标记的数据集中创建模板。如果新的波形与现有模板高度相关,那么它几乎可以肯定是地震。
如果你有足够多的人类标记示例,模板匹配效果非常好。2019年,加州理工学院Zach Ross的实验室使用模板匹配在南加利福尼亚发现了比先前已知的多10倍的地震,包括本文开头提到的地震。他们发现的所有新地震中,几乎全部是震级1级及以下的微小地震。
然而,如果你没有大量预先存在的模板数据集,你就不能轻易应用模板匹配。这在南加利福尼亚不是问题——那里已经有了基本完整的1.7级以下地震记录——但在其他地方则是一个挑战。
此外,模板匹配计算成本高昂。使用模板匹配创建南加利福尼亚地震数据集需要200个Nvidia P100 GPU连续运行数天。
必须有更好的方法。
深入解析地震转换器
AI检测模型解决了所有这些问题:
- 它们比模板匹配更快。
- 因为AI检测模型非常小(约35万个参数,与GPT4.0等数十亿参数的大型语言模型相比),它们可以在消费级CPU上运行。
- AI模型对原始数据集中未表示的区域具有良好的泛化能力。
作为额外的好处,AI模型可以提供关于不同类型地震震动到达时间的更好信息。计时两种最重要波——P波和S波——的到达称为_相位拾取_。它使科学家能够推断地震的结构。AI模型可以在地震检测的同时完成这项工作。
地震检测(和相位拾取)的基本任务如下所示:
前三行代表不同的振动方向(东西、南北和上下)。给定这三个维度的振动,我们能否确定是否发生了地震,以及何时开始?
我们想检测初始的P波,它直接来自地震震源。但这可能很棘手,因为P波的回声可能会从其他岩层反射并稍后到达,使波形变得更加复杂。
因此,理想情况下,我们的模型在样本的每个时间步输出三个内容:
- 那一刻正在发生地震的概率。
- 第一波P波在该时刻到达的概率。
- 第一波S波在该时刻到达的概率。
我们在第四行看到所有三个输出:绿色的检测、蓝色的P波到达和红色的S波到达。(这个样本中有两次地震。)
为了训练AI模型,科学家们使用大量标记数据,如上所示,进行监督训练。我将描述一个最常用的模型:地震转换器,它由斯坦福大学团队于2020年左右开发,由S. Mostafa Mousavi领导,他后来成为哈佛大学教授。
与许多地震检测模型一样,地震转换器采用了图像分类的想法。读者可能熟悉AlexNet,这是一个著名的图像识别模型,它在2012年引发了深度学习热潮。
AlexNet使用了卷积,这是一种神经网络架构,基于物理上接近的像素更可能相关的想法。AlexNet的第一层卷积将图像分解成小块——每边11个像素——并根据边缘或梯度等简单特征的存在对每个小块进行分类。
下一层将第一层的分类作为输入,并检查更高级别的概念,如纹理或简单形状。
每个卷积层分析图像的更大部分,并在更高级别的抽象上操作。通过最后的层,网络正在查看整个图像并识别"蘑菇"和"集装箱船"等对象。
图像是二维的,因此AlexNet基于二维卷积。相比之下,地震图数据是一维的,因此地震转换器使用时间维度上的一维卷积。第一层分析0.1秒块的振动数据,而后续层在逐渐更长的时间段内识别模式。
很难说地震模型正在提取的确切模式,但我们可以将其类比于使用一维卷积的假设音频转录模型。该模型可能首先识别辅音,然后是音节,然后是单词,然后在逐渐增大的时间尺度上识别句子。
地震转换器将原始波形数据转换为一系列高级表示,这些表示表明地震和其他地震学重要事件的可能性。然后是一系列反卷积层,精确定位地震及其极其重要的P波和S波发生的时间。
该模型还在模型中间使用了一个注意力层,以混合时间序列不同部分的信息。注意力机制在大型语言模型中最为著名,它有助于在单词之间传递信息。它在地震图检测中扮演类似角色。地震地震图具有一般结构:P波后跟S波,然后是其他类型的震动。因此,如果一段波形看起来像P波的开始,注意力机制有助于它检查它是否符合更广泛的地震模式。
扩展地震数据
地震转换器的所有组件都来自神经网络文献的标准设计。其他成功的检测模型,如PhaseNet,甚至更简单。PhaseNet仅使用一维卷积来拾取地震波的到达时间。没有注意力层。
根据Byrnes的说法,一般来说,地震学领域"没有太多需要发明新架构的必要"。源自图像处理的技术已经足够。
那么,是什么使这些通用架构如此有效?数据。大量的数据。
Ars先前曾报道过ImageNet(一个图像识别基准)的引入如何帮助引发深度学习热潮。大型公开的地震数据集在地震学中发挥了类似作用。
地震转换器使用斯坦福地震数据集(STEAD)进行训练,该数据集包含来自全球的120万个人类标记的地震图数据段。(STEAD的论文明确提到了ImageNet作为灵感)。其他模型,如PhaseNet,也在数十万或数百万个标记段上进行了训练。
数据和架构的组合效果很好。根据Byrnes的说法,当前的模型在识别和分类地震方面"好得可笑"。通常,机器学习方法发现的地震数量是先前在某个地区识别的10倍或更多。你可以在意大利地震目录中直接看到这一点:
AI工具不一定比模板匹配检测到更多地震。但基于AI的技术在计算和劳动密集度方面要低得多,这使得它们对一般研究项目更易于访问,也更易于在世界各地应用。
总的来说,这些机器学习模型非常出色,以至于它们几乎完全取代了传统的地震检测和相位拾取方法,特别是对于较小震级的地震。
这些AI技术能做什么?
地震科学的圣杯是地震预测。例如,科学家们知道西雅图附近将发生大地震,但无法判断它是在明天还是一百年后发生。如果我们能够足够精确地预测地震,以便让受影响地区的人们撤离,那将会很有帮助。
你可能认为AI工具有助于预测地震,但似乎这还没有发生。
康奈尔的Judith Hubbard说,应用更加技术性,也不那么花哨。
更好的AI模型为地震学家提供了更全面的地震目录,这解锁了"许多不同的技术",Bradley说。
最酷的应用之一是理解和成像火山。火山活动产生大量小地震,其位置有助于科学家理解岩浆系统的结构。在2022年的论文中,John Wilding及其合著者使用大型AI生成的地震目录创建了夏威夷火山系统的这一惊人图像。
他们提供了先前假设的深部Pāhala岩浆复合体与莫纳罗亚浅部火山结构之间岩浆连接的直接证据。你可以在图像中看到这一点,标记为Pāhala-Mauna Loa地震活动带的箭头。作者还能够将Pāhala岩浆复合体的结构细分为离散的岩浆片。这种细节水平可能促进更好的实时地震监测和更准确的喷发预测。
另一个有前景的领域是降低处理大型数据集的成本。分布式声学传感(DAS)是一种强大的技术,它使用光纤电缆测量沿整个电缆长度的地震活动。根据休斯顿大学教授Jiaxuan Li的说法,单个DAS阵列每天可以产生"数百GB的数据"。这些数据可以产生极高分辨率的数据集——足以分辨出单个脚步声。
AI工具使得能够非常准确地确定DAS数据中的地震时间。在DAS数据中引入AI相位拾取技术之前,Li和他的一些合作者尝试使用传统技术。虽然这些方法"大致有效",但对于他们的下游分析来说不够准确。没有AI,他的许多工作将会"困难得多",他告诉我。
Li也乐观地认为,AI工具未来将能够帮助他从丰富的DAS数据中分离出"新型号"。
并非所有AI技术都取得了成功
与许多其他科学领域一样,地震学家面临采用AI方法的压力,无论这些方法是否与他们的研究相关。
"学校希望你把AI这个词放在一切前面,"Byrnes说:"这有点失控了。"
这可能导致技术上合理但实际上无用的论文。Hubbard和Bradley告诉我,他们看到了许多基于AI技术的论文,这些论文"揭示了对地震工作原理的基本误解。"
他们指出,研究生可能会感到压力,要专门研究AI方法,而减少对科学领域基础知识的学习。他们担心,如果这种AI驱动的研究变得根深蒂固,较老的方法将被"某种无意义所超越。"
虽然这些都是真实的问题,并且Understanding AI之前也曾报道过,但我认为它们并不影响AI地震检测的成功。在过去的五年中,基于AI的工作流程几乎完全取代了地震学中的一个基本任务,而且效果更好。
这相当酷。