🔒Открыть пост
и посмотреть медиа
и посмотреть медиа
⚡ Промпт, который сравнивает ИИ-модели без готовых тестов
Чтобы понять, какая модель лучше, обычно нужен готовый набор задач и обвязка вокруг него. Есть приём проще: одним промптом попросите сильную модель придумать свежий тест и приватную рубрику оценки прямо в диалоге.
Как это работает: тем же тестом прогоняете сравниваемые модели, а их полные ответы возвращаете в исходный чат — та же сильная модель оценивает и сравнивает их по своей рубрике. Тест после сравнения выбрасывается, в следующий раз генерируется новый, поэтому задания не «запоминаются». Кода не нужно: модели сравниваются копипастом между вкладками браузера.
Главный вывод: судите по тому, что ответ позволяет сделать, а не по словам-маркерам («отказываюсь», «предупреждение», «гипотетически»). Модель, которая охотнее отвечает, может оказаться слабее, а отвечающая с оговорками — дать реально рабочие детали.
🌐 Источник: Hugging Face Blog
#ИИ #промпты #LLM #оценка_моделей #AI