JEV vs Julia: классификация инженерных задач
Сравниваем JEV и Julia на классификации инженерных задач на русском и английском.
Результаты
Результаты ещё не опубликованы. Подтверждённой даты публикации пока нет.
| Модель | Точность Choice | Точность Score | Точность Noul | Общая точность | Задержка | Стоимость |
|---|---|---|---|---|---|---|
| JEV | — | — | — | — | — | — |
| Julia | — | — | — | — | — | — |
Данные проверены ·
Как измеряли
- Инженерные задачи из проектов Arcanada и Talomnia на русском и английском.
- Обе модели получают одинаковые запросы.
- Эталонные ответы зафиксированы до вызовов моделей.
- Один вызов на запрос для каждой модели.
- Ответы оцениваются по детерминированным правилам.