Назначение
LLM2Jev оценивает варианты по prefill-логитам локальных языковых и визуальных моделей без поэтапной генерации токенов.
Роль Jev
Это независимая реализация по образцу Jev с совместимой HTTP-точкой System One.
Как использовать
Используйте Python или HTTP с SGLang, Transformers либо MLX и поддерживаемыми текстовыми и визуальными входами.
Ограничения
Польза кеша зависит от длины и числа вариантов; приведённое сравнение JevBench охватывает 231 открытую задачу.
Проверка подтверждения: