Bayesian Modelling of Nonstationary Extreme Values Using a Nonparametric Hawkes Process
本文提出了一种结合分层广义帕累托分布的贝叶斯非参数霍克斯过程模型,通过捕捉自激聚类模式及不同聚类间的幅度变化,有效预测非平稳极端事件,并在模拟数据和真实数据上均展现出优越的预测性能。
原始论文采用 CC BY 4.0 许可(http://creativecommons.org/licenses/by/4.0/)。 这是对下方论文的AI生成解释。它不是由作者撰写或认可的。如需技术准确性,请参阅原始论文。 阅读完整免责声明
想象一下,你正在试图预测下一场“大风暴”何时来袭。在数据世界中,这些风暴就是极端事件:股市的突然崩盘、大规模地震,或是恐怖主义致死人数的激增。
很长一段时间里,统计学家试图用一套非常僵硬的规则手册来预测这些风暴。他们假设风暴以稳定、可预测的节奏发生(就像连绵不断的细雨),并且每场风暴的大小大致相同。但正如本文作者所指出的,现实生活并非如此。风暴往往成簇出现(一阵暴雨骤然而至,随后是干旱),而且风暴的大小会根据季节或当前状况而变化。
本文介绍了一种更智能的新方法来模拟这些混乱事件。这就像是从简单的风向标升级为 sophisticated 的自学习天气雷达。
以下是他们新系统的工作原理,分解为几个简单的概念:
1. “自我激发”的闹钟(霍克斯过程)
传统模型将事件视为相互独立的。如果股市今天下跌,传统模型可能会想:“好吧,结束了。明天下跌的概率只是平均概率。”
作者使用了一种称为霍克斯过程(Hawkes Process)的方法。想象一个挤满人的房间。如果一个人打喷嚏,可能会引起其他人也打喷嚏。如果第二个人也打喷嚏,可能会引发一连串的反应。
- 比喻:想象地震。当大地震动(一个事件)时,它会使地面变得不稳定,增加了随后不久发生余震(另一个事件)的可能性。
- 创新点:作者意识到,极端事件往往表现出这种“打喷嚏链式反应”的特征。他们建立了一个模型,其中一个极端事件会“激发”系统,使其更有可能在紧接着发生另一个极端事件。这解释了为什么股市的糟糕日子往往成簇出现。
2. 变形的触发器(非参数核函数)
在旧的“打喷嚏”模型中,你必须猜测“喷嚏”是如何传播的。它会持续 5 分钟?还是 1 小时?你必须选择一个固定的形状(如钟形曲线),并希望它是正确的。如果你选错了形状,你的预测就会出错。
作者说:“为什么要猜测?让数据告诉我们形状。”
- 比喻:与其强迫喷嚏去适应预先制作好的饼干模具,他们采用了一种可塑粘土的方法(称为狄利克雷过程)。他们让数据自己塑造“激发”的形状。
- 结果:如果数据显示事件在几小时内紧密聚集然后消散,模型就会学会这种形状。如果它们聚集了几天,模型也会学会这一点。它足够灵活,能够处理怪异、不可预测的模式,而无需用户提前猜测规则。
3. “团队式”的风暴规模(分层广义帕累托分布标记)
一旦模型知道风暴何时可能发生,它就需要猜测风暴会有多大。
- 问题:在过去,统计学家假设每场风暴,无论是发生在平静年份还是混乱年份,都是从同一个“尺寸袋”中抽取的。
- 创新点:作者意识到,“簇”(混乱的一周)中的风暴可能比“平静”一周中的风暴更大。然而,有些簇太小,无法仅凭自身数据准确猜测其规模。
- 比喻:想象一个体育联盟。如果你有一支只有 3 名球员的队伍,你很难判断他们有多强。但如果你观察联盟中的所有球队,你就能对整体技能水平有一个大致的了解。
- 作者使用了一种分层模型。他们让每个事件“簇”拥有自己的平均规模(尺度),但同时强制所有这些簇共享一个共同的“尾部形状”(即最坏情况可能达到的极端程度)。
- 这使得模型可以说:“这个特定的事件簇通常比平均水平大”,同时仍然从整个数据集中借用力量,以确保对最坏可能事件的预测是准确的。
4. 整合一切:预测机器
作者将这三个想法结合到一个单一的“贝叶斯”模型中。他们在四个截然不同的真实世界数据集上测试了该模型:
- 股市(标普 500 指数):寻找价值的巨大下跌。
- 市场波动率(VIX):寻找恐惧的激增。
- 风速:寻找飓风级的阵风。
- 恐怖主义:寻找高致死人数的日子。
结果:
当他们用新的“灵活粘土”模型与旧的“僵硬饼干模具”模型进行对比测试时,新模型每次都胜出。
- 它在预测下一场极端事件何时发生方面表现更好,因为它理解了事件是成簇出现的。
- 它在预测这些事件会有多大方面表现更好,因为它理解了事件的规模取决于它所属的“簇”或时间段。
总结
本文认为,要预测罕见且危险的事件,我们需要停止假装世界是平静且可预测的。相反,我们需要一个理解以下内容的模型:
- 事件会触发其他事件(成簇性)。
- 触发规则会发生变化(灵活的形状)。
- 事件的规模取决于当前的混乱程度(分层规模)。
通过使用这种方法,作者创造了一种工具,在预测金融、自然和安全领域的下一场“大风暴”方面显著优于以往,而无需对世界运作方式做出僵化且往往错误的假设。
您所在领域的论文太多了?
获取与您研究关键词匹配的最新论文每日摘要——附技术摘要,使用您的语言。