Dask-GeoPandas 空间分区性能

💡 原文英文,约900词,阅读约需4分钟。
📝

内容提要

昨天一所大学联系我们,他们在使用我们在Planetary Computer上托管的Microsoft Building Footprints数据集时遇到了性能问题。他们想获取土耳其一小部分的建筑物足迹,但注意到性能相对较慢,似乎读取了很多数据。本文详细介绍了我们如何调试发生了什么,以及我们采取的步骤来解决问题。我们重新收集了一些新的ms-buildings STAC项目,它们是空间分区的,这样查询就会非常快:只需加载少量数据即可。我们使用Dask来加速Dask,从而将元数据读取时间从30秒降低到30秒(使用更多工作者会更快)。

🏷️

标签

➡️

继续阅读