Azure上的国家水文模型
原文英文,约400词,阅读约需2分钟。
📝
内容提要
作者在CIROH培训和开发者大会上做了演讲,创建了一个Jupyter Book。他为数据的子集创建了云优化版本,但由于缺乏操作管道,这些版本将被删除。作者使用JupyterHub和Kubernetes来运行研讨会,并分享了数据处理的代码和使用Dask Operator创建Dask集群的经验。数据处理的实际管道仍然是一个挑战,但作者希望能够解决。作者认为需要采取措施使数据在云端更易用,可能的第一步是使用Kerchunk索引。
🎯
关键要点
-
作者在CIROH培训和开发者大会上做了演讲,并创建了一个Jupyter Book。
-
为数据的子集创建了云优化版本,但由于缺乏操作管道,这些版本将被删除。
-
使用JupyterHub和Kubernetes运行研讨会,并分享了数据处理的代码和使用Dask Operator创建Dask集群的经验。
-
数据处理的实际管道仍然是一个挑战,尤其是由于数据本身的复杂性。
-
国家水模型的更新导致内部分块结构与Kerchunk的当前实现不兼容,调试过程较为困难。
-
需要采取措施使数据在云端更易用,可能的第一步是使用Kerchunk索引。
-
维护操作管道是一项挑战,但希望未来能够解决。
🏷️