🔒Открыть пост
и посмотреть медиа
и посмотреть медиа
От GPT-2 до gpt-oss: анализ архитектурных достижений
(From GPT-2 to gpt-oss: Analyzing the Architectural Advances)
ссылка
Это обзор эволюции крупных языковых моделей от GPT‑2 до современных open‑source решений, в котором автор анализирует, как открытые модели догоняют по возможностям и масштабам закрытые продукты.
Автор отмечает, что модели стали значительно больше: GPT‑2 имела около 1,5 млрд параметров, а новые модели могут достигать десятков миллиардов.
Также рассматриваются проблемы вычислительных затрат, оптимизации эффективности и методы оценки качества генерации, что помогает понять, как общественные разработки ускоряют развитие машинного интеллекта.
#news