荷兰政府用大数据预测天气预防自然灾害,他们是怎么做的?

作者 | 乔治娜·乌斯蒂克

翻译 | Katie
责编 | 晋兆雨

头图 | CSDN付费下载于视觉中国

你是否对天气预报电视报道的背后的运作感到好奇?是谁在管理政府卫星?也许你会思考关于传感器的一个问题——数据会流向何处? 

在荷兰,这些数据是由KNMI或政府的气象部门-(Kininklijk Nederlands Meteorologisch Instituut)收集和管理的。KNMI预报天气,研究气候变化并监视地震活动,他们的影响力远远超出了荷兰。 

2017年,由KNMI制造的TROPOMI随Sentinel-5 Precursor卫星发射升空。最近,TROPOMI测量并绘制了由于COVID-19导致的12月至3月中国二氧化氮浓度下降的图表。 

但是如何收集这些数据?TROPOMI和其他传感器任何将数据传到KNMI?收到后如何处理?

最近,TNW与Saskia Wagenaar和Roy Engelen进行了交谈,他们两个是为KNMI进行数据收集和分发的开发人员。


从传感器到天气室

 

云工程师Roy Engelen告诉我们:“KNMI由几个部门组成。有些部门负责研究工作,有的部门在现场进行实地工作,更换传感器并进行测试。而气象学家,他们实际上负责向荷兰人发出预警。” 

如果我们要简单描绘一下数据如何在KNMI中从A到B,现场传感器将是起点。Engelen在IT迁移团队中担任云工程师,该团队负责整个信息链,从传感器一直到天气室。他说:“我的部门是使整条链保持运行和信息运行的助手。因此涉及更多IT相关的工作。” 

这些传感器可以完成人类数百年来的工作-观察天气。但现在,他们会自动收集温度,降雨量和气压等数据。

Engelen说:“因此,在荷兰,拥有48个传感场地,其中陆地上34个,海上14个”。当地还有一些人,他们的花园里有一个小型传感场地,或者是农民,他们的田里也有传感器,所有这些数据在KNMI得到收集。” 

Engelen猜测:“这些人大多数都是个人志愿者。该国大约有300名志愿者。但是,愿意帮助的志愿者人数有所减少,因为这是需要每日都进行的工作。”Engelen告诉我们,这是KNMI要解决的一个问题,因为当地志愿者非常重要:“这300个额外的数据点对于获得清晰的画面确实至关重要,因为预测模型需要高分辨率。”更多数据意味着更准确的天气预报。 

现场传感器收集到数据后,将通过KNMI的模型运行数据。“所有这些数据输出都会生成地图,视频等。”

Engelen说,“还收集了来自雷达和卫星的原始数据,并将这些数据用作预测模型的输入,并生成实时地图。然后将这些地图发送给气象室(以及著名的布恩拉达尔)中的气象学家,气象学家给出有关天气的警告和信息。原始数据得到存档,以便研究气候变化并建立更好的天气预报模型的研究人员可以使用。”

该数据一直在收集,理论上是如此。有时,传感器会在现场掉落。

Engelen继续说:“例如,使用激光测量鸟群的多云度,或鸟在传感器上筑巢都可以影响传感器。而且,由于测量雨水,在很久以前(带有传感器)的田地还没有关闭,所以任何人都可以越过它们。喝醉了的人会在里面排尿,所以突然那里有很多降雨。”但是,Engelen保证:“传感器将不断得到改进,类似的事情过去曾发生过。”

 

数据会如何处理?

 

Saskia Wagenaar是从事KNMI数据平台(KPD)的软件工程师,该平台可通过API访问所有KNMI的开放数据和许可数据。Wagenaar的团队使用Engelen建立的云基础架构。 

Wagenaar告诉TNW:“我的责任是真正收集数据并使之可用。“我作为数据分发者的角色的好处在于,不仅KNMI的科学家可以将其用于研究;每个人都有访问权限。因为我们是政府机构,所以我们必须免费提供开放数据。” 

最常访问此开放数据的人员是学者、政府研究人员,还有商业公司,例如史基浦机场和荷航,他们使用这些数据来根据天气情况安排飞行航班。

管理如此众多的开放访问数据并非没有挑战。除了人工和数据存储的成本外,还要确保以一种有效的方式提供数据:“如何为用户提供如此庞大的数据量,以便他们可以正确使用它们?这就是我的团队正在努力的事情。我们从许多不同的领域收集数据,例如雷达测量,风向测量或卫星数据等,我们必须以不同的方式处理所有这些数据。 

因此,我们一直在向量身定制的API开发迈进,这些API可访问这些不同域的数据。我们正在积极地收集用户的意见,询问他们如何使用数据。根据他们的使用经验,我们可以确保API有用。 

KNMI的研究不仅仅对荷兰有重要意义。Wagenaar从事的项目旨在合并欧洲国家的数据,这些数据均以不同的方式收集和提供。Wagenaar说:“这使得在重大事件发生时很难迅速地了解清楚情况。”

 

自然灾害与气候变化

 

“重大事件”包括自然灾害,例如冰岛火山Eyjafjallajökull于2010年爆发。Wagenaar告诉TNW,欧洲中部的数据宝库将提高“预警能力和态势感知”,这可能至关重要。在欧洲的合作中,确保将地面测量和卫星测量都集中在一个中心点,以便欧洲每个人都可以访问数据,如果类似事件再次发生,人们可以使用它来提前预知。” 

Wagenaar表示:“尽管在该领域收集的大多数数据都用于天气预报,但数据存档对于研究气候变化也至关重要。存档之后,(数据)对于气候变化研究变得非常重要。要查看气候变化趋势,传感器始终位于同样的位置非常重要,这样预测的结果才更贴近。”

如前面所说的,最近发生的一次导致趋势发生变化的事件是COVID-19:“我认为最有趣的是我们实际上在世界上某些地方看到空气质量正在改善。我们可以通过卫星看到,封城的上空的空气中的微粒更少。”

 

充满希望

政府开发人员的工作并不是最独立或最具创造力的,尤其是在涉及天气的情况下,这是人类无法控制的。但是Engelen表示,他在IT迁移团队中担任云工程师的工作具有很大的自由度。实际上,这就是他最初来KNMI工作的方式。Engelen说:“会鼓励你在整个IT流程中积极提出意见。” 

Wagenaar被使用KNMI数据平台的机会所吸引,因为有机会与研究人员紧密合作,并采用了新技术:“我已经来这里三年了,我认为这是一个非常有活力的环境。当我开始在KNMI工作时,所有工作都是通过本地服务完成的。我们现在正在走向云端技术。另外,我们将使用不断更新的技术,这是一个非常有趣的过程。” Wagenaar总结道:“它使我们能够学习和发展自己,以及改进我们的工作方式。”

 

原文链接:

https://thenextweb.com/readme/2020/05/28/how-the-dutch-government-uses-data-to-predict-the-weather-and-prepare-for-natural-disasters/

本文由CSDN云计算翻译,转载请注明出处

更多阅读推荐

  • Harvest遭受闪电贷攻击,黑客通过Curve盗走2300万美元

  • 阿里云资深技术专家易立:我对云原生软件架构的观察与思考

  • 当飞猪遇上 Serverless | 云原生 Talk

  • 任正非:华为明年至少招8000名应届生;苹果开发 Google 搜索的替代;NumPy 1.19.3发布|极客头条

  • 一口气看完45个寄存器,CPU核心技术大揭秘

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.mzph.cn/news/516158.shtml

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

Excel VBA Sql 操作Access数据库

目录 1. 文件创建2. 数据库连接2.1 前期和后期绑定2.2 通过判断 Excel 的不同版本,给出不同的连接字符串2.3 Excel 自连接3. 应用:增、删、改3.1 增加数据的语法3.2 删除数据的语法3.3 修改数据的语法4. 结语1. 文件创建 首先,我们需要在预先设置的路径下新建Excel工作簿。…

企业微信小程序_小程序开发工具及真机调试_host配置及代理

文章目录一、开发前准备1. 开发文档2. 工具安装3. 安装插件4. 调整编译模式5. 选择企业6. PC 调试前端7. PC 调试后端二、甄姬调试前端2.1. 预览小程序2.2. 手机企微扫码2.3. 手机企微调试2.4. 多场景调试2.5. 手机企微调试前后端一、开发前准备 1. 开发文档 小程序开发文档&…

别再盲目学Python了!

如果你想问最近这些年什么编程语言最值得学习,我会毫不犹豫的告诉你是Python。无论是刚入门的程序员,还是年薪BATJ的技术大牛,都无可否认现在Python对于一个程序员职业发展的重要性。所以不仅是开发小白,甚至很多开发老手&#xf…

VBA 网页提取特定内容 - 网抓实践总结

目录 前言1. 常用代码和自定义函数1.1 文本 to 剪贴板1.2 获取网页主体源代码1.2.1 方法一:`InternetExplorer.Application`1.2.2 方法二:`MSXML2.XMLHTTP`1.2.3 方法三:`Msxml2.ServerXMLHTTP`1.2.4 方法四:WinHttp.WinHttpRequest.5.11.2.5 方法五:Microsoft.XMLHTTP1.3…

企业微信_Windows版本调试

文章目录1. 调试文档2. 下载插件3. 插件放置4. 开启调试模式5. 效果图6. 关闭调试模式1. 调试文档 客户端调试文档: https://developer.work.weixin.qq.com/document/path/95384 2. 下载插件 3. 插件放置 把 devtools_resources.pak 放到企业微信的安装目录下&am…

如果千百年前有视觉AI算法,世界将会是什么样的光景呢?

视觉AI算法在近些年取得了一定的突破,被应用在了越来越多的地方,我相信距离真正的AI普及这个大目标也越来越近了。我时常在想假如古代也有视觉AI算法,那是不是很多故事的结局都将被改写?《伯乐相马》、《皇帝批红》、《木兰从军》…

困境实现飞跃,梦想照进现实《安防视频监控数据存储蓝皮书》发布

前言 近年来,随着云计算、5G、AI 技术的不断兴起与发展,安防行业正在发生数字化转型,作为安防行业重要的数据采集与管理中枢,视频监控设备在数量上不断增加,在科技强有力的支撑之下,庞大的图片、视频数据组…

企业微信小程序_获取准确定位的方法及解决定位不准确的问题

文章目录一、经验分享1. 微信api现状2. 解决方案3. 适用场景二、小程序集成腾讯定位服务2.1. 注册腾讯开发者2.2. 创建应用2.3. 添加key2.4. 下载sdk2.5. 合法域名三、开发实战3.1. sdk拷贝3.2. 页面引用3.3. 页面部分3.4. 数据部分3.5. 方法部分四、真机调试4.1. 项目运行4.2.…

深度揭秘:腾讯存储技术发展史

采访嘉宾 | 腾讯云副总裁谢明等图源 | 视觉中国来源 | CSDN(ID:CSDNnews)在腾讯内部,负责腾讯存储技术研发的部门,一直被认为是生产技术专家的“黄埔军校”。腾讯不少技术方向的负责人,最早也都出自这个团队。这或许可…

常见字典用法集锦及代码详解

目录前言字典的简介1. 字典对象1.1 Add 方法1.2 Exists 方法1.3 Keys 方法1.4 Items 方法1.5 Remove 方法1.6 RemoveAll 方法2. 实例2.1 实例1. 普通常见的求不重复值问题2.1.1 问题2.1.2 实例代码2.1.3 代码详解2.2 实例2 求多表的不重复值问题2.2.1 问题2.2.2 代码2.2.3 代码…

企业微信小程序_集成腾讯地图实现精准定位考勤打卡

开源项目地址:https://gitee.com/gblfy/tx-position-check-in 关于微信小程序集成腾讯地图详情,可以参考:https://blog.csdn.net/weixin_40816738/article/details/122519497

18个PPT,29个提问解答,都在这儿啦!

4月25-26日,全球首个 Apache 顶级项目在线盛会 Flink Forward 中文精华版重磅开播,聚焦 Alibaba、 Google、AWS、Uber、Netflix、DellEMC、微博、滴滴等各大互联网公司实时计算的经典场景和业务故事,由 Flink 核心贡献者们对 19 个优质 talk …

CSDN公众号新功能上线,居然还能搜出小姐姐???(文末有福利)

为了给各位打工人更好的搜索体验CSDN总是在学习新技能这次CSDN公众号又给大家带来了一项全新的搜索技能在CSDN旗下的公众号内回复消息就能自动回复想搜索的内容啦小编来给大家演示一下,在公众号内输入“mysql安装教程”,就能得到CSDN全站内关于mysql安装…

如何在SQL Server 2019中添加数据敏感度分类的命令

作者 | Jordan Sanders翻译 | 火火酱。责编 | 晋兆雨头图 | CSDN付费下载于视觉中国为了确保数据库安全性和完整性,数据库管理员日常需要运行多种操作。因此,无论在何种情况下,我们都不能忽视数据库中敏感数据的重要性。在本文中,…

支撑数千家天猫商家CRM业务,数云高弹性数据库如何做

“数据,已经渗透到当今每一个行业和业务职能领域,成为重要的生产因素。人们对于海量数据的挖掘和运用,预示着新一波生产率增长和消费者盈余浪潮的到来”。-----麦肯锡 基于互联网和大数据和时代背景,用户在互联网上留下更多的印记…

全国高速恢复收费!阿里云:自由流“3大特色能力”使能智慧之路

5月6日,全国高速公路正式恢复收费。ETC普及优化程度、高速自由流收费模式等成为热点话题。随着取消省界高速公路收费站和全国ETC的普及,极大提升高速公路网通行效率,有效降低物流运输成本,减少收费站“堵车”现象,高速…

移动云11.11,钜惠High不停!

一年一度的双十一又来啦全民购物车已开起来!然而复杂的优惠规则催生一大批通宵达旦看直播的定金人和尾款人对这些套路,移动云统统Say NO作为一朵有服务温度的“云”,让优惠简单点让用户买想买的东西,省该省的钱五重惊喜&#xff0…

使用Blink CEP实现差值聚合计算

使用Blink SQLUDAF实现差值聚合计算介绍了如何使用Blink SQLUDAF实现实时流上的差值聚合计算,后来在与付典就业务需求和具体实现方式进行探讨时,付典提出通过CEP实现的思路和方法。 本文介绍通过CEP实现实时流上的差值聚合计算。 感谢付典在实现过程中的…

企业微信小程序_授权登录接口获取用户userid

文章目录一、前置知识1. 阅读 企业微信小程序开发文档2. 企业微信小程序登录流程3. 微信小程序区别二、前端部分2.1. 调用登录接口2.2. 请求后端接口2.3. 项目源码三、后端部分3.1. yml配置3.2. 获取用户信息接口3.3. 获取token3.4. 工具类3.5. vo对象四、调试部分4.1. 模式切换…

我输给了一个 25 岁的男人

未来的你:小伙计你好,我是 10 年后的你,刚穿越回来,还是热乎的。现在的你:Are you sure?大哥,从你那憔悴的神色里可以看出日夜颠倒的作息和毫无爱情发酵的灵魂,随便喊个人来看看,咱…