Проверка точности ИИ-моделей на документах — в таблице

Сценарий прогоняет тестовые задания из таблица через несколько ИИ-моделей и сводит их оценки для сравнения.

  • Тесты из таблица
  • Текст из документов в yandexDisk
  • Сравнение нескольких моделей
  • Оценки в одной таблице
Google Sheets

Как это работает

Перенос данных из yandexDisk в Google Sheets делается готовым сценарием: он сам замечает новое и переносит его.

  1. Запуск: Запуск вручную
  2. Затем: Получить тесты
  3. Проверка: Это PDF?
  4. Если да — Обработать по одному
  5. Затем: Google Drive
  6. Проверка: Это файл?
  7. Если да — Извлечь из файла
  8. Затем: LLM Judge
  9. Затем: Обновить результаты
  10. Затем: Ожидание
  11. Затем: Модель чата OpenRouter
  12. Затем: Парсер структурированного вывода

Настроить такую автоматизацию (yandexDisk + Google Sheets) можно в Scriptera — без кода: опишите задачу, остальное сделают за вас.