Using DSPy to evaluate and improve Datasette Agent's — 用DSPy自动评估并优化Datasette Agent的SQL系统提示词。

• 作者用DSPy框架自动评估Datasette Agent的SQL系统提示词，发现基线提示中“不要重复调用describe_table”的建议导致模型猜测列名（如page_count、order_id），引发错误重试循环。
• DSPy测试了GPT-4.1 mini和nano，识别出多个改进方向，例如在提示词中直接包含列名，或软化避免重复调用的建议。
• 对开发者而言，DSPy提供了一种自动化、可重复的方法来优化LLM系统提示，减少手动试错，提升Agent的SQL查询准确性和鲁棒性。

原文：Using DSPy to evaluate and improve Datasette Agent's SQL system prompts · 作者 Simon Willison