ML Product Hub - ML новости

Рубрика "Утренняя статья" CRINN: Контрастное обучение с подкреплением для поиска приближенных ближайших соседей (CRINN: Contrastive Reinforcement Learning for Approximate Nearest Neighbor Search) cсылка CRINN — это система, разработанная Университетом Вашингтона и командой DeepReinforce, которая автоматизирует оптимизацию алгоритмов поиска ближайших соседей (ANNS). Ключевая особенность системы заключается в использовании большой языковой модели (LLM) в сочетании с контрастным обучением с подкреплением для итеративного улучшения C++ кода. Благодаря этому подходу возможно значительное повышение производительности запросов (до 85,25%). Традиционно оптимизация ANNS требовала глубоких знаний в областях компьютерной архитектуры, параллельного программирования и математики, что делало её сложной и трудоемкой. CRINN же превращает задачу оптимизации в задачу обучения с подкреплением, где скорость выполнения кода используется в качестве сигнала награды. Модель анализирует уже сгенерированные варианты кода и их показатели, что позволяет выделять эффективные стратегии и постепенно совершенствовать ключевые модули — построения графа, поиска и уточнения. Исследования проводились на шести наборах данных, таких как SIFT-128-Euclidean, GIST-960-Euclidean и MNIST-784-Euclidean. Система продемонстрировала лучшие результаты на трех наборах данных и заняла лидирующие позиции на двух других, при этом наиболее значительные улучшения наблюдались в модуле построения графа. Будущие исследования планируют включение углового расстояния в качестве сигнала награды и использование ParlayANN как базовой модели для обучения, что подчеркивает потенциал применения обученных языковых моделей в автоматизации сложной оптимизации алгоритмов. #статья

APOD: 11 августа 2025 года – Самые близкие снимки Солнца (APOD: 2025 August 11 – Closest Ever Images Near the Sun) ссылка Зонд Parker Solar Probe ворвался в раскаленную атмосферу Солнца, сняв умопомрачительные кадры с расстояния всего 5 его диаметров! На видео за 5 секунд — 7 часов путешествия: клубящаяся корона, выбросы плазмы и пляшущие на фоне звёзды. Этот дерзкий робот раскрывает тайны солнечного ветра, который бомбардирует Землю, запуская полярные сияния и угрожая спутникам. Никогда ещё человечество не заглядывало так близко в пылающее сердце нашей системы! 🔥 #космос

Оптимальное сочетание пробных мониторов и черных ящиков (Optimally Combining Probe Monitors and Black Box Monitors) ссылка Статья описывает новый метод, который объединяет два типа мониторинга искусственного интеллекта: «пробные мониторы», анализирующие внутренние вычисления модели, и «черные ящики», оценивающие лишь входные и выходные данные. Методика позволяет повысить точность обнаружения потенциально опасных отклонений в поведении системы. В экспериментах комбинированный подход показал улучшение эффективности на 15–20% по сравнению с использованием каждого монитора по отдельности. #news

Рубрика "Лендинг технологической компании" элементы_дизайна ProOne Labs — это студия цифрового дизайна, создающая уникальные проекты с использованием передовых технологий и креативного подхода. Работы студии характеризуются яркой визуальностью и глубоким интерактивом, что делает взаимодействие с ними незабываемым. #landing

Кризисный режим GPT-5 от OpenAI ( OpenAI's GPT-5 crisis mode) ссылка - OpenAI и провал GPT-5: Пользователи возмущены из-за технических сбоев и удаления старой модели GPT-4o. CEO Сэм Альтман провёл экстренный AMA, пообещав исправить ошибки и вернуть GPT-4o. - Бывший сотрудник OpenAI собрал $1,5 млрд для AI-фонда, несмотря на отсутствие опыта в инвестициях. Фонд уже показал 47% доходности. - Google и NASA создают AI-врача для астронавтов. Система диагностирует травмы с точностью до 88% и может использоваться в удалённых регионах Земли. - Microsoft выпустил Copilot 3D — инструмент для мгновенного создания 3D-моделей из изображений. - Tesla закрывает команду суперкомпьютера Dojo, чтобы сосредоточиться на AI-чипах. #dailyshortcuts

Наблюдаемость наблюдаемости (The Observability of Observability) ссылка Observability описывается как способность системы отражать свои внутренние процессы через сбор и анализ данных, таких как логи, метрики и трассировки. Статья рассматривает методы оценки работоспособности этих инструментов, что позволяет выявлять сбои до возникновения критических проблем. Приводятся примеры и конкретные цифры, подтверждающие эффективность интегрированных подходов к контролю, обеспечивающих надежность и устойчивость современных распределенных систем. #news

Рубрика "Утренняя статья" Обучаемая динамическая маска разреженного внимания (Trainable Dynamic Mask Sparse Attention) cсылка DMA — это метод, позволяющий большим языковым моделям обрабатывать более длинные контексты за счёт динамического выбора наиболее важных токенов для расчёта внимания. Этот метод решает проблему квадратичной вычислительной сложности стандартного механизма самовнимания, которая создаёт существенные вычислительные затраты при работе с длинными последовательностями. Основные идеи DMA включают генерацию маски, зависящей от содержимого, что позволяет модели выделять наиболее важные части текста, и использование позиционной информации для пропуска ненужных вычислений. В результате достигается значительное ускорение (до 15.5-кратного по сравнению с традиционными методами) и сохранение или даже улучшение качества модели. DMA успешно справляется с задачами, требующими ассоциативного воспроизведения информации, демонстрирует улучшения в показателях сложности (perplexity) и показывает значительные ускорения, особенно при обработке длинных последовательностей. Будущие направления исследования включают адаптивный выбор размера окна, улучшение механизмов позиционного кодирования (возможно, с заменой RoPE) и расширение применения метода на мультимодальные задачи, такие как обработка изображений, аудио и видео. #статья

APOD: 10 августа 2025 – Зодиакальная Дорога (APOD: 2025 August 10 – Zodiacal Road) ссылка Таинственное сияние на горизонте — это зодиакальный свет, отражённый солнечным светом от пыли во внутренней Солнечной системе! Пыль, вероятно, осталась от комет семейства Юпитера и медленно движется к Солнцу. На снимке, сделанном в Испании, свет образует яркий треугольник после заката, а рядом сверкают звезда Регул и скопление Ясли. Завораживающее зрелище, подтверждающее космическое происхождение пыли! #космос

Помощь хранилищам данных успевать за революцией ИИ (Helping data storage keep up with the AI revolution) ссылка Cloudian представила инновационную систему хранения, отвечающую на вызовы масштабного роста данных, вызванного революцией искусственного интеллекта. Технология использует объектное хранение, что позволяет гибко увеличивать объемы данных без потери быстродействия. Это решение помогает эффективно управлять большими наборами данных, которые постоянно растут в эпоху цифровой трансформации. Цифры исследования подтверждают высокую надежность и скорость работы решения, что делает его актуальным для современных вычислительных и аналитических задач. #news