超要約: Text-to-SQLの勉強に最強のデータセット爆誕!データ分析がもっと楽になるかも💖
✨ ギャル的キラキラポイント ✨ ● 実世界のデータベースで勉強できるから、マジ卍(まじまんじ)に使える! ● データ分析が言葉でできるようになるって、激アツじゃん?🔥 ● 新しいビジネスが生まれる予感!未来が楽しみだね🤩
詳細解説 ● 背景 Text-to-SQL(テキストからSQLへ変換)技術、つまり「言葉でデータ検索」ね!データ分析がもっと簡単にできたら最高じゃん?でも、良いデータセットがないと、モデル(AI)も育たないんだよね💦
● 方法 実世界のデータベースを参考に、質問とSQLクエリのペアを大量に生成!スキーマ(データの構造)もめっちゃリアルで、SQLの勉強にピッタリ👍 データセットは公開されてるから、みんなも使ってみてね!
続きは「らくらく論文」アプリで
Advances in large language models have accelerated progress in text-to-SQL, methods for converting natural language queries into valid SQL queries. A key bottleneck for developing generalizable text-to-SQL models is the lack of large-scale datasets with sufficient schema and query complexity, domain coverage, and task diversity. We introduce SQaLe: a large-scale semi-synthetic text-to-SQL dataset built on 135,875 relational database schemas expanded from a collection of real-world schemas, SchemaPile. We establish a principled generation pipeline which combines schema sampling, question synthesis, and SQL construction, and produce 517,676 high-quality (question, schema, query) triples. The SQaLe dataset captures realistic schema size variability, diverse query patterns, and natural language ambiguity while maintaining execution validity. We provide an analysis of its contents and characteristics, and find that SQaLe introduces the most realistic large-scale text-to-SQL dataset to date in comparison with existing benchmarks and datasets. We discuss how SQaLe enables our vision for data scaling and model generalization in text-to-SQL research. The dataset is accessible at: https://huggingface.co/datasets/trl-lab/SQaLe-text-to-SQL-dataset.