ПостНаука - лекции и знания

Современные языковые модели нередко называют reasoning-моделями, поскольку они демонстрируют способность выполнять сложные рассуждения через генерацию «цепочки мыслей» (chain-of-thought) в процессе вывода. Идея chain-of-thought заключается в том, чтобы заставить модель пошагово проговаривать промежуточные рассуждения вместо того, чтобы сразу выдавать краткий ответ. Исследования показали, что такой приём существенно улучшает точность решения арифметических и логических задач: например, при добавлении всего нескольких цепочек рассуждений в подсказку 540-миллиардная модель превзошла прежние лучшие решения на математическом бенчмарке GSM8K. Однако у такого подхода есть и недостатки: Ссылка скрыта