Автор проекта Schemagate показал слой ограничения доступа: 90.1 AC-F1 против 88.1 у лучшей опубликованной конфигурации и 0.984 refusal F1 против 0.933. Точность. На всех 1 534 вопросах dev-набора BIRD execution accuracy составила 77.1% при одном вызове модели. На Mini-Dev результаты для SQLite, PostgreSQL и MySQL — 81.0, 72.6 и 72.4. В Spider 2.0 автор получил 71.9% на 135 вопросах для SQLite, тогда как лучший опубликованный агент набрал 57.8% Pass@1. В UniQL с диалектом Oracle получилось 64.5% против 49.6% у лучшей опубликованной базовой конфигурации. Проверка доступа. Schemagate показывает модели только те таблицы, к которым у текущего пользователя есть права, и отклоняет запросы к остальным объектам до их выполнения. На Spider-ACL тест охватывал 19 624 пары вопросов и ролей. Среди 0 из 8 128 выполненных запросов ни один не прочитал данные, недоступные соответствующей роли. Результат Spider 2.0 охватывает только одну треть бенчмарка, а результаты одиночных запусков различаются примерно на один процентный пункт. Что это значит: ограничение доступа встроено до написания SQL, а не оставлено на защиту самой базы данных.