DEV Community
·
我更新了用于获取BoardGameGeek数据的Python脚本
💡
原文英文，约1000词，阅读约需4分钟。
📝
内容提要
这篇文章介绍了一个脚本，用于从BoardGameGeek API批量获取数据并存储到CSV文件。更新后的脚本通过批量请求多个ID，提高了效率。每次请求可返回约800个项目的数据，包括游戏名称、ID、类型、评分等信息。脚本使用Python库如BeautifulSoup、pandas和requests，并提供错误处理和数据保存功能。
🎯
关键要点
- 该脚本用于从BoardGameGeek API批量获取数据并存储到CSV文件。
- 更新后的脚本通过批量请求多个ID，提高了效率，每次请求可返回约800个项目的数据。
- 获取的数据包括游戏名称、ID、类型、评分、重量、出版年份、最小和最大玩家人数、最小和最大游戏时间、最小年龄、拥有者、类别、机制、设计师、艺术家和出版商等信息。
- 脚本使用Python库如BeautifulSoup、pandas和requests，并提供错误处理和数据保存功能。
- 定义了请求的URL头部和请求之间的暂停时间，设置了起始ID范围、最大范围和批量大小。
- 主循环根据批量大小生成ID字符串，并将其附加到请求的URL中，处理响应并将数据保存到CSV文件。
- 在请求过程中，如果发生错误，脚本会继续处理下一个批次。
- 使用pandas库预览CSV文件中的前几行记录。
➡️
