ature重磅:击败最先进全球洪水预警系统,提前天预测河流洪水,每年挽救数千人生命流量水文地质灾害

【新智元导读】升级洪水预警系统,每年可以挽救数千人的生命!谷歌最新研究登上Nature。

提前7天,AI是如何做到的?

那么,这一人工智能模型如何能给出可靠的洪水预报呢?

据论文描述,该研究使用了一种叫做长短期记忆(LSTM)网络的人工智能模型来进行河流流量的预测。这个模型的设计有点像我们的大脑,它可以从一系列的气象数据中学习并预测未来的河流流量,分为编码器和解码器两部分。

首先,编码器负责从上一段时间内的气象数据中提取信息,它从过去的天气情况中理解河流流量的变化情况。它将历史气象数据转化为可供解码器使用的信息形式的作用。通过学习气象数据中的特征和时间模式,模型对过去气象情况形成抽象理解,为后续的流量预测提供了关键性的输入。

编码器则通过接收一系列气象数据(比如降水量、温度、辐射等)作为输入,学习如何提取这些数据中的关键特征信息。这些特征信息可能包括季节性变化、气象事件(如暴雨、高温等)以及它们对河流流量的影响。

同时,编码器能够捕获气象数据之间的时间依赖关系。这意味着它不仅仅考虑当前时刻的气象情况,还考虑了之前一段时间内的气象变化趋势。通过对历史数据的学习,编码器能够理解气象数据的时间序列模式,并将其纳入到模型中。

在编码器中,LSTM 网络被用来处理时间序列数据。LSTM 具有内部记忆单元,可以记住过去的信息,并根据当前的输入来更新内部状态。这使得编码器能够在处理长期依赖关系时表现优异,并在建模过程中保留重要的历史信息。

最终,编码器将历史气象数据转化为一个潜在的表示形式,这个表示形式包含了对过去气象情况的理解和总结。这个表示形式是编码器的输出,并传递给解码器,用于未来流量的预测。

然后,解码器部分使用这些信息来预测未来几天的河流流量。它考虑了当前的气象预报,以及过去的天气对未来流量的影响。这样,就可以得到未来一周的流量预测。

解码器在模型中负责将历史气象信息和未来预测结合起来,生成对未来河流流量的预测,并输出相应的流量概率分布。

解码器首先接收来自编码器的潜在表示形式,这个表示形式包含了历史气象数据的抽象理解。解码器利用这些信息来理解过去的气象条件对河流流量的影响,并建立起历史数据与未来预测之间的联系。

解码器同时接收未来的气象预测数据作为输入。这些预测数据通常包括了未来几天的降水量、温度等气象指标。解码器将历史信息和未来预测结合起来,通过学习它们之间的关系来预测未来的河流流量。

在理解了历史气象条件和未来预测之后,解码器通过一个独立的 LSTM 网络来生成对未来河流流量的预测。这个网络可以理解为一个时间序列的生成器,根据过去的信息和未来的预测来生成流量序列。

解码器不仅仅预测未来的河流流量值,还输出一个概率分布。具体来说,模型使用一个单边拉普拉斯分布来描述流量的不确定性,预测每个时间步的流量值时,输出一个单边拉普拉斯分布的参数,而不是一个确定的值。这使得模型能够考虑到流量预测的不确定性,为决策提供了更多的信息。

最终的流量预测结果是通过集成多个解码器模型的输出得到的。模型使用了三个独立训练的解码器 LSTM 网络,然后将它们的预测结果取中值,从而减少预测的方差并提高预测的稳定性。

真实效果怎么样?

研究人员收集了大量的气象数据和河流流量数据,来训练这一模型。这些数据来自于不同的数据源,包括气象预报、历史记录和地理信息。通过将数据标准化处理,模型得以正确理解它们。

然后,数据分成两种类型:训练集和测试集。训练集用于训练模型,而测试集则用于评估模型的性能。研究人员使用了一种“交叉验证”的方法,以确保模型在不同的时间和地点都能够有效地工作。

最后,研究团队评估了模型的性能,并与现有的流量预测模型进行了比较。

研究团队采用了常见的误差指标来量化模型预测值与实际观测值之间的差异。由于模型预测的不只是未来流量的具体数值,而且还给出了流量预测的不确定性,因此他们使用了概率积分变换(PIT)图来评估预测分布的准确性。

研究团队还通过与其他流量预测模型的对比来评估所提出模型的性能。这包括了传统的物理模型和其他机器学习模型。通过比较不同模型的误差指标,可以直观地展示所提模型在准确性和可靠性上的优势。

另外,研究团队还采用了特定的流域或河流作为案例研究,应用模型于实际情境中,并详细分析模型在不同季节、不同气候条件下的预测性能。这有助于评估模型在实际应用中的可行性和稳定性。

除了量化指标,研究团队也还对模型预测的不确定性进行了深入分析。这包括评估不同来源的不确定性(如输入数据的不确定性、模型结构的不确定性等)对预测结果的影响,以及模型如何在存在不确定性的情况下仍然提供有用的预测。

结果显示,模型展现了较高的精确度和召回率,尤其是对于短期回报周期的事件。这意味着模型能够准确地识别出洪水事件,并且错过的事件较少。

结合精确度和召回率,模型在不同回报周期的事件上获得了较高的 F1 score,表明了其在准确性和全面性之间取得了良好的平衡。

此外,通过双侧 Wilcoxon 符号秩检验,模型的预测结果在统计上显著优于基准模型。这证明了模型在洪水预测方面的有效性。

Cohen's d 指标显示,模型性能改进的效果是显著的,这进一步验证了模型相对于传统方法的优势。

在 Nash–Sutcliffe 效率和 Kling-Gupta 效率等水文指标上,模型同样显示了良好的预测精度和对水文过程变化的敏感性。

不足与展望

然而,该研究也存在一些局限性。

例如,实验采用的样本可能较小,限制了研究结果的普遍适用性和统计功效。研究所用的数据集的多样性存在不足,这可能影响模型的泛化能力。采用的模型复杂度较高,可能导致计算成本增加并限制了其可解释性和便捷性。

另外,研究聚焦于特定任务或领域,可能限制了方法的广泛应用;这个方法缺乏长期影响的评估,使得对模型随时间变化的表现理解不足,评估标准可能无法全面反映模型性能;且对现有技术的改进程度可能相对有限。

对此,研究团队表示,未来的工作需要进一步将洪水预报的覆盖范围扩大到全球更多地点,以及其他类型的洪水相关事件和灾害,包括山洪和城市洪水。人工智能技术也将继续发挥关键作用,帮助推动科学研究,促进气候行动。

参考资料:

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

THE END
0.击败全球No.1系统、覆盖80+国家,谷歌洪水预测模型再登Nature用长短期记忆网络 (LSTM) 构建的河流预报模型,能够提前 5 天实现对洪水的可靠预测,对于 5 年一遇级别的洪涝灾害预测准确度,与一般性洪涝灾害(1 年一遇)预测准确度相当。 《尚书·尧典》中记载:「汤汤洪水方割,荡荡怀山襄陵,浩浩滔天,下民其咨。」尧舜时代,洪水泛滥让百姓苦不堪言,尧舜决定找人治理洪水,鲧最jvzquC41jwh/djfk0ci/ew4xkg}05?:32
1.洪涝预测与人工智能:保护生活与财产核心算法原理和具体操作步骤以及数学模型公式详细讲解 具体代码实例和详细解释说明 未来发展趋势与挑战 附录常见问题与解答 1.1 洪涝的影响 洪涝对人类的影响非常严重,包括以下方面: 人民生命损失:洪涝很容易导致人民生命的损失,特别是在洪水淹没的地区,人民无法逃脱。 财产损失:洪涝会导致财产的大量损失,包括农田、房屋、基础设施等。 经济损失:洪 jvzquC41dnuh0lxfp0tfv8zpkxksu|p{42761jwvkerf1mjvckrt1:87:2893:
2.基于栅格型新安江模型的中小河流精细化洪水预报栅格型新安江模型 精细化洪水预报 定量化模拟 参数空间分布 水文要素 中小河流jvzquC41yy}/ewpk0eun0ls1Ctzjeuj1ELLEVxycn/NIFa72436229:0jvs
3.河流系统实时洪水预报误差多点联合校正方法研究从20世纪60年代开始,国内外学者对洪水预报实时校正方法进行了广泛的研究。Koren V.I.等[5]将广义差分ARMA模型引入预报模型,在多瑙河布达佩斯至巴加河段采取自我校正预报器算法进行水位预报;Wood E.F.[6]在大流域上使用卡尔曼滤波器技术,建议采用分区子系统的处理方式,采用增补噪声过程的技术补偿预报误差,来处理各个jvzquC41yy}/lrfpuj{/exr1r1913;i254=75;
4.洪水是怎样预报的,如何保证精度看到这里,各位读者是不是以为洪水预报就是制作一套预报模型,跑出一个结果,预报就完成了,剩下的就是结果上报,领导决策,各方抢险了?实际上的洪水预报流程可是远比这复杂得多。仅仅从洪水预报模型的角度而言,一个大流域就绝对不会只使用一种预报模型。没有人可以保证如果只采用一套预报模型,这套模型在某些关键的预报jvzq<84yyy4489iqe0ipo8hqpvkov8641273385917>5:=72;a?:5=:;;4
5.基于HECHMS和双超模型的小流域洪水预报研究与应用HEC-HMS模型 双超模型 洪水预报 参数敏感性分析 小流域jvzquC41efse0lsmk0ipo7hp1Cxuklqg1EJNF662338.396:;8614:3jvo
6.新疆洪水预报预警中融雪径流模型应用进展针对全球变化背景下极端升温、暴雪和暖湿化现象以及中国新疆地区融雪洪水灾害风险增大问题,概述了新疆不同类型洪水灾害特征,重点阐述了近年发生频率增加、致灾性强、灾害风险增大,但在新疆未引起重视的融雪洪水的研究进展,对比分析了不同类型融雪径流模型特点和研究现状。综合目前融雪径流模型已有进展和面临的挑战,提出新疆jvzquC41yy}/inttgu4dqv3ep1mismq1EP52276433>0l7nuup42295/82<10;5450765
7.珠江流域洪水预报模型精准及时预报预警央视网2025-05-31 06:38:08174354次观看 珠江流域洪水预报模型精准及时预报预警。 责任编辑:央视网 央视新闻 我用心你放心 喜欢热门推荐 视频丨特朗普说俄罗斯是“纸老虎” 俄回应:我们是真正的熊 9月25日 07:39 严查严打欺诈骗保 国家医保局启动医保基金管理专项整治 9月25日 14:18 联合国气候变化峰会举行 国际jvzquC41eqtugwy/uvgukl3eev|og€x0eezw0lto1utpy6gqqm5wkmjq0jznnHnvgoejfF;363<42?8:23?46;;2(vxbetdkf?8e7
8.LSTM网络实现洪水预报原理附完整Matlab代码利用神经网络来进行洪水预报时,由于不涉及到物理机制,因此特征因子的选择至关重要。最常采用的因子包括前期降雨量和前期流量,例如在预报t+T(T为预见期)时刻A水文站的流量时,t-a、t-a+1、t-1、t(a+1为前期时段长度)时刻的降雨量即为前期降雨量,t-a、t-a+1、t-1、t时刻的流量即为前期流量。jvzquC41cxujf7txgtljv7hp1rutv89644i86
9.河北雨洪模型.pdf洪水预报工作极为 重要。 1 河北省属于半干旱半湿润地区,自然条件十分复杂,需要建立适合本 省情况的洪水预报模型。 多年来,河北省洪水预报始终是预报人员的技术难题。从国内外引进 的水文模型,由于降雨特性及流域下垫面条件差异,均不能很好地解决河 北省洪水预报问题,严重制约着水利工程效益的发挥。 在借鉴国内外许多水文模型的基础上,jvzquC41oc~/dxtm33>/exr1jvsm1;53;1664A4922<24:6342632<50ujzn
10.水资源环境水环境评价是对多项水质监测数据的综合评价,从而确定各类或各区域水体的合理使用。建立基于GIS技术和平台的水环境评价模型,将为全国或流域水环境的宏观控制与执法管理提供更科学的依据和有效的手段。 4.分布式流域水文模型 流域产汇流模型是水资源-环境-灾害管理中提高预报预警能力的重要保证。分布式流域洪水预报模型是jvzquC41yy}/q|lgq0io1ytuv18ggm<
11.SCS模型在流域尺度水文模拟中的应用及其结果分析【摘要】:在分析国内外众多研究成果的基础上,选择国外已广泛应用、国内也有一定研究基础的分布式小流域洪水预报模型——SCS模型对湖北省漳河灌区内的新埠河-桥河流域洪水进行模拟研究,并对模拟结果及模型适用性进行讨论。利用绘图软件Autocad2004对流域进行一定 jvzquC41erle0lsmk0ipo7hp1Cxuklqg1EVGF]TVCN3[I\Q422?1;95326>/j}r
12.共242项!2022年度水利部重大科技项目清单公布资讯中心(三)水利专业模型研究 其他有关研究 1 国际河流有关研究(名称另行下达) 水利部国际经济技术合作交流中心 金海 申报类项目 (一)水旱灾害防御领域 (二)水资源优化配置领域 (三)水资源集约节约利用领域 (四)河湖治理与生态环境复苏领域 (五)国家水网等水利工程建设与运行领域jvzquC41yy}/kwxvtwsfp}3eqo4dp8sgyu532;8234>08=>2744tj}rn
13.水文模型在山洪模拟中的比较应用国内沿用传统大江大河建模思路从淹没角度建立了以经验归纳统计法和水文水力学方法为手段的洪水预报模型,初步提出了“一维简化水动力学模型”、“分布式水文模型”和“多维完整水动力学模型”等模型。如王璐等将5种常用的水文模型应用于湿润、半干旱半湿润地区的14个典型山区小流域,在山区开展模型适用性研究,得出在湿润地jvzquC41yy}/jjsurwh/q{l1lq{spjq1RcvftRshqtsbvrtp0cyqzHucrgxJFF7;26>
14.洪水预报研究与展望叶金印等[17]等以淮河蒋家河以上流域为研究对象,采用集合降水预报产品(预见期为0~240 h)驱动洪水预报模型进行模拟预报,ECMWF集合降水预报能够明显提高洪水预报精度,模拟结果能够刻画洪水流量过程线的不确定范围,并能提前24 h及时预警。汤欣钢等[18]以漳河流域为例检验分析中央气象台天气降水预报在该区域的准确性及经 jvzq<84kttohc}j0yj{/gmz0ep5DP8620384;?4|puj/4;5467
15.“北京模型”智慧防洪“过去全市五大流域只有18个主要洪水预警断面,今年通过优化洪水预报模型结构,基本能实现流域面积50平方公里以上河流洪水预报全覆盖。”高强说,比如永定河流域,以前只能聚焦几个关键的风险点,现在能够对流域内十余条较大的河流进行洪水风险研判,并结合地理空间数据,更加精准地反映流域洪水过境的过程。 jvzq<84yyy4djrscyczft7hqo0io1wjyuekovnw1fh5cl87244671}7244673>d9:6:697mvon
16.数字孪生流域智慧防洪体系建设|四信水动力模型助力四预数字化二维水动力模型是一种利用数学模型和计算机仿真技术的洪水预报方法。该模型可模拟水域数据,如河道、湖泊的水位、流量,并预测洪水发生时间、规模、影响范围等信息,为应急管理部门和居民提供预警和决策依据。 随着计算机技术和数值模拟方法的进步,该模型已广泛应用于洪水预报、水利工程设计、海岸防护等领域,成为最常用的数学jvzquC41yy}/hxzt/hgjvq3eqo4dp8npfwyut‚Sgyu55;;3jvor
17.星图亿水|GEOVISiWater助力洪水预报,守护江河安澜建成洪水预报集总+分布式的洪水预报模型,可适用于各种下垫面条件的洪水预报。实现预报模型与气象数据深度耦合,基于气象网格或短临气象预报成果,贯通”降雨-产流-汇流-演进”洪水预报链条和全部预报指标。预报模型库具备多尺度、多过程、高时间分辨率、灵活空间分辨率模型集成管理能力。 jvzquC41v071lzpc0eun0ls1rkj`5<:586?567xjvor
18.基于正则化GRU模型的洪水预测摘要:针对传统神经网络模型在洪水预测过程中存在准确性低、过拟合等问题, 本文以赣江流域外洲水文站每月平均水位为研究对象, 提出基于正则化GRU神经网络的洪水预测模型来提高洪水预报精度. 选用relu函数作为整个神经网络的输出层激活函数, 将弹性网正则化引入到GRU模型中, 对网络中输入权重w实施正则化处理, 以提升GRU模jvzquC41e/y.c7tti0io1qyon1813B4718>957mvon