在现代世界中,是否连接往往被视为一个简单的“是或否”的问题:你是否有互联网,还是没有?然而,对于研究那些能够使用数字工具的人与不能使用的人之间差距的研究人员来说,现实要复杂得多。真正的数字包容取决于物理层面的基础。它不仅需要信号,还需要为设备供电的电力、负担得起订阅费的能力,以及可靠传输数据的基础设施。当这些要素缺失时,这种差距不仅仅是信息的匮乏,更是无法参与到如今运行在数字网络上的经济和社会体系之中。了解这些连接是如何增长的、在哪里停滞不前,以及我们如何能准确预测其未来的路径,对于规划一个联网社会所需的服务和保护措施至关重要。
一个研究小组致力于通过建立一种新的衡量连接度的方法来绘制这一未来图景。他们并没有仅仅观察互联网使用情况,而是构建了一个综合得分,融合了四个关键要素:互联网使用人数的百分比、移动电话订阅数、固定宽带的可用性以及电力获取情况。他们并不将这一得分视为在线人数的原始计数,而是将其视为一种相对位置,展示一个国家在任何给定年份与其同行相比的表现如何。利用来自近两百个国家、跨越二十多年的历史数据,他们提出了一个简单的问题:我们能否预测这些连接得分的走向?他们通过尝试使用两种不同的方法来测试这一问题进行预测。第一种是被称为“持久性”(persistence)的简单方法,该方法假设明年与今年大致相同。第二种涉及复杂的计算机模型,通过分析多种经济和社会因素来寻找肉眼难以察觉的模式。
两者的对比结果出人意料地平庸。虽然复杂的机器学习模型能够发现复杂的模式,但它们并未胜过“假设未来与现在相似”的简单方法。事实上,一个绘制近期趋势直线图的标准线性回归模型表现得略好于那些复杂的算法,且两者都仅比简单的“持久性”猜测领先了一小步。研究人员发现,最准确的短期预测来自于一个对互联网使用权重最高的模型,但即使是最好的模型也仅是将误差率降低了很小的幅度。这表明,在未来几年内,数字接入的轨迹主要由其自身的惯性决定,而增加更复杂的变量并不一定会赋予人们洞察未来的水晶球。该研究明确排除了这些连接得分是在衡量数字技能、技术使用的质量或政府管理网络安全风险能力的观点。该得分严格是对接入程度的衡量,而非对连接建立后发生之事的衡量。
当研究人员将注意力转向对哈萨克斯坦的具体长期预测时,未来的不确定性变得更加明显。他们没有针对该国在2049年的地位给出一个单一的预测。相反,他们根据对近期历史的不同解读,提出了三种不同的情景。如果近年的缓慢增长被视为最终爆发前的暂时停顿,该国的得分可能达到96.72。然而,如果整个增长历史被视为一条随着接近极限而自然放缓的曲线,得分则会低得多,约为77.35。这两个结果之间的差异是显著的,说明了一段时期的稳定可以被解读成截然不同的方式。研究人员强调,这些数字不是联网人数的百分比,而是零到一百分制下的相对位置。它们作为规划工具,旨在帮助政府进行压力测试,即询问其基础设施和安全措施是否能够应对快速增长,或者是否需要专注于克服持久性的障碍。
最终,这项研究得出结论:虽然我们可以相对准确地追踪近期数字接入的路径,但漫长的未来之路仍充满不确定性。先进的机器学习工具通常被誉为解锁复杂预测的关键,但在这种特定语境下,它们相比简单的统计方法几乎没有优势。最有价值的见解或许在于意识到,连接是一场相对的竞赛;随着一个国家的进步,得分取决于其他所有人的表现如何。对于政策制定者而言,其启示并非一个确定的目的地,而是一组可能性。通过理解未来可能因近期趋势是暂时的还是永久性的而呈现出迥异的面貌,领导者可以为各种结果做好准备,确保数字鸿沟不会仅仅因为计划过于僵化而无法适应不断变化的格局。
技术摘要:预测数字鸿沟
问题陈述
数字连接是参与现代社会、经济和教育体系的关键前提。然而,单一指标的互联网普及率无法捕捉完整的接入环境,该环境包括移动通信订阅、固定宽带以及电力接入。此外,连接性指标经常与数字技能、使用质量或网络安全治理能力混淆,从而导致对“数字鸿沟”的误解。本研究旨在解决构建多维接入度量标准的需求,并利用机器学习评估连接性轨迹的短期可预测性,同时明确将连接性预测与网络安全治理结果区分开来。
研究方法
本研究构建了一个综合连接指数(Connectivity Index, CI),并利用世界银行世界发展指标进行可预测性评估。
- 数据构建: 数据集涵盖了 2002 年至 2024 年间的 196 个国家。严格的报告覆盖率过滤机制要求每年至少有 100 个国家报告数据方可纳入,因此排除了 1990–2001 年及 2025 年的数据。最终建模样本包含 3,732 个国家-年份观测值(2004–2024 年)。
- 指数公式: 基准 CI 是四个年度内归一化组件的加权平均值:
- 互联网使用率(权重 40%)
- 移动通信订阅量(权重 20%,上限为每 100 人 150 份)
- 固定宽带订阅量(权重 20%)
- 电力接入率(权重 20%)
- 归一化通过每年的最小-最大缩放(min-max scaling)完成,这使得该指数成为衡量一个国家在报告国家中的相对位置的度量,而非绝对百分比。
- 预测模型: 研究基于时间序列拆分(训练集:2018 年前;验证集:2018–2021 年;测试集:2021 年后)对比了四种模型:
- 持久性模型(Persistence): 使用前一年的观测指数。
- 线性回归(Linear Regression): 多变量模型,使用人均 GDP、电力接入率、移动通信订阅量、中等教育入学率、城镇人口以及 1 年和 2 年滞后的 CI。
- 随机森林回归(Random Forest Regression)。
- XGBoost 回归(XGBoost Regression)。
注:研究尝试了 ARIMA 和 Holt/ETS 基准模型,但在最终运行中产生了零个有效测试观测值,因此将其排除在性能排名之外。
- 敏感性分析: 测试了四种权重方案(基准、等权重、互联网主导型、基础设施平衡型),以评估稳健性。
- 长周期分析: 针对哈萨克斯坦,研究并未采用单一的点预测,而是提出了三种向 2049 年外推的情景:保守线性趋势(近期平台期)、基准逻辑曲线(完整历史数据)和加速逻辑曲线(2018 年前)。
核心结果
- 预测性能: 在 537 个观测值的共同测试集上,线性回归实现了最低的均方根误差(RMSE)4.300,优于持久性模型(4.582)、随机森林(4.353)和 XGBoost(4.454)。线性回归相对于持久性模型的提升较为温和(RMSE 降低约 6.1%)。
- 模型复杂度: 结果并不支持复杂机器学习模型(随机森林、XGBoost)在特定指数和样本下优于简单线性回归或持久性模型的普遍结论。
- 权重敏感性: 虽然替代权重方案与基准方案高度相关(相关系数 >0.99),但它们显著改变了预测误差和国家层面的轨迹。相比之下,“互联网主导型”方案使线性模型的 RMSE 降至最低(3.791),而“等权重”方案表现最差(5.465)。国家层面的变化不可忽视;例如,哈萨克斯坦的平均绝对指数变化量根据权重方案的不同,在 1.969 到 2.953 之间波动。
- 周期诊断: 预测不确定性随预测周期增加而显著上升。虽然一年的持久性误差适中,但两到三年的误差大幅上升,这表明不应将短期基准外推为长期预测。
- 哈萨克斯坦情景(2049 年):
- 保守线性(近期趋势):96.72
- 基准逻辑(完整历史):77.35
- 加速逻辑(2018 年前):77.70
- 解读: 这种巨大的差异表明,近期(2018–2024 年)出现的平台期并非已证实的饱和天花板。
贡献与主张
本文做出了四个具体的贡献:
- 指数构建: 开发了一个多维度的、明确属于相对性质的连接指数,将物理接入与下游成果区分开来。
- 对比评估: 对持久性模型与多变量模型在共同时间序列测试集上的表现进行了严谨评估,发现多变量线性回归较持久性模型有微弱改进,但复杂的机器学习模型并未展现优势。
- 敏感性分析: 证明了尽管指数在总体排序上具有稳健性,但权重选择会显著影响预测误差和特定国家的轨迹。
- 情景规划: 将视角从点预测转向基于情景的长周期分析(以哈萨克斯坦为例),明确模拟了近期数据平台期带来的不确定性。
意义与局限性
研究结论指出,连接性预测是规划和压力测试数字服务及网络安全需求的工具,而非衡量治理能力或作为网络风险因果驱动因素的指标。作者明确表示,该指数捕捉的是第一层级的接入情况和基础设施前提,而非数字技能或第二/第三层级的差距。
本文保持了审慎的态度,承认以下几点:
- 权重是基于理论设定的,而非通过经验优化得出的。
- 指数的相对性质意味着,一个国家的得分变化可能是由于全球分布的变化,而非其自身表现的变化。
- 长周期外推具有高度不确定性,且易受结构性冲击的影响。
- 由于数据覆盖问题排除了 ARIMA/HolM/ETS 模型,这限制了关于单变量时间序列优越性的论证。
最终,研究表明,对于短期连接性预测,简单的多变量线性回归已足够,复杂的机器学习方法在该背景下并不能带来普适性的优势。
每周获取最佳 computer science 论文。
受到斯坦福、剑桥和法国科学院研究人员的信赖。
请查收邮箱确认订阅。
出了点问题,再试一次?
无垃圾邮件,随时退订。