Azure上的国家水文模型

💡 原文英文,约400词,阅读约需2分钟。
📝

内容提要

作者在CIROH培训和开发者大会上做了演讲,创建了一个Jupyter Book。他为数据的子集创建了云优化版本,但由于缺乏操作管道,这些版本将被删除。作者使用JupyterHub和Kubernetes来运行研讨会,并分享了数据处理的代码和使用Dask Operator创建Dask集群的经验。数据处理的实际管道仍然是一个挑战,但作者希望能够解决。作者认为需要采取措施使数据在云端更易用,可能的第一步是使用Kerchunk索引。

🎯

关键要点

  • 作者在CIROH培训和开发者大会上做了演讲,并创建了一个Jupyter Book。

  • 为数据的子集创建了云优化版本,但由于缺乏操作管道,这些版本将被删除。

  • 使用JupyterHub和Kubernetes运行研讨会,并分享了数据处理的代码和使用Dask Operator创建Dask集群的经验。

  • 数据处理的实际管道仍然是一个挑战,尤其是由于数据本身的复杂性。

  • 国家水模型的更新导致内部分块结构与Kerchunk的当前实现不兼容,调试过程较为困难。

  • 需要采取措施使数据在云端更易用,可能的第一步是使用Kerchunk索引。

  • 维护操作管道是一项挑战,但希望未来能够解决。

🏷️

标签

➡️

继续阅读