LlamaIndex + Waii：将数据库中的结构化数据与PDF结合以增强数据分析
内容提要
Waii与LlamaIndex的结合推动了企业数据分析的发展。通过文本转SQL API，用户可以轻松整合多种数据源，生成SQL查询并进行数据分析，从而简化数据处理，帮助企业做出更明智的决策。
延伸解读
为何需要新的文本转SQL插件
LlamaIndex内置的文本转SQL插件在处理简单数据库（少于10张表、100列）时表现良好，但面对中大型数据库（数百张表、数千列）时，受限于LLM的上下文窗口，即使GPT-4-turbo的128K令牌也会出现不准确和任务检索退化。Waii通过内置编译器、知识图谱和语义规则，提高了查询生成的效率和准确性，解决了这一局限。
Waii服务架构解析
Waii服务可部署为SaaS或本地Docker容器，其核心组件包括：查询生成器协调整个查询生成流程并与LLM通信；知识图谱/元数据管理连接数据库，提取元数据和查询历史以辅助选择正确的表和模式；语义规则确保查询语义正确；Waii编译器在LLM生成查询后修补问题，若无法修复则根据错误信息重新生成。
代理如何结合数据库与PDF
LlamaIndex代理在客户端运行，配备Waii和PDF加载器等工具。代理根据用户输入选择工具：若问题涉及数据库，则调用Waii工具生成并执行SQL；若涉及PDF报告，则调用PDF工具检索信息。示例中，代理先查询数据库获取圣诞节畅销品类，再与德勤假日零售调查PDF对比，发现数据库缺少“礼品卡及其他”和“食品饮料”品类。
实际应用中的注意事项
使用该集成方案时，需将数据库连接至Waii并获取API密钥，然后在LlamaIndex中创建代理。代理能理解数据集、生成SQL并执行，还可与外部报告交叉验证。但需注意，LLM的上下文限制仍可能影响复杂查询，且语义规则和知识图谱的配置对准确性至关重要。此外，PDF解析质量也会影响对比结果。
Q&A
Waii和LlamaIndex的结合如何推动数据分析的发展？
Waii与LlamaIndex的结合通过文本转SQL API简化了数据处理，使用户能够整合多种数据源并生成SQL查询，从而帮助企业做出更明智的决策。
LlamaHub插件解决了哪些文本转SQL的局限性？
新开发的LlamaHub插件解决了现有插件在处理中大型数据库时的局限性，能够更有效地生成SQL查询。
如何使用Waii生成SQL查询？
用户只需连接数据库并使用Waii API密钥创建LlamaIndex代理，然后通过代理生成SQL查询。
Waii的内部知识图谱如何提高查询生成的效率？
Waii的内部知识图谱通过提取数据库元数据和查询历史，帮助查询生成器选择合适的表和模式，从而提高查询生成的效率和准确性。
集成后的代理可以执行哪些任务？
集成后的代理能够执行多种文本转SQL任务，并根据PDF验证数据，支持复杂的数据分析。
如何比较数据库中的数据与外部报告？
用户可以通过代理生成SQL查询并与外部报告进行比较，以验证和分析数据的一致性。
