Стартап Reflection анонсировал открытую модель Beam на 501 млрд параметров
Двухлетний стартап Reflection AI анонсировал свою первую frontier-модель с открытыми весами под названием Beam, предназначенную для сложных рассуждений и работы с кодом.
Характеристики и архитектура Beam
Новая модель представляет собой текстовую mixture-of-experts систему с общим числом параметров 501 млрд, из которых 23 млрд являются активными. Она была предварительно обучена на 23,8 триллиона токенов и обладает контекстным окном в 1 млн токенов.
Разработчики отмечают, что Beam создана с использованием обучения с подкреплением при высоких вычислительных затратах. Модель оптимизирована для решения задач в области программирования, логических рассуждений и выполнения агентских сценариев.
Сравнение с конкурентами и производительность
По заявлениям компании, Beam демонстрирует результаты на уровне ведущих китайских открытых моделей на бенчмарках продвинутых рассуждений. При этом новинка расходует в три-четыре раза меньше вычислительных ресурсов на инференс по сравнению с аналогами.
В качестве основных ориентиров Reflection видит как закрытые системы от Anthropic и OpenAI, так и популярные открытые решения от китайских разработчиков. Напрямую модель также конкурирует с американскими аналогами вроде Inkling от Thinking Machines Lab, превосходя ее в ряде тестов по программированию, хотя Inkling является мультимодальной.
Финансирование и инфраструктура стартапа
Компания Reflection AI была основана в 2024 году двумя бывшими исследователями из Google DeepMind. По данным PitchBook, стартап привлек около $4,7 млрд от инвесторов, среди которых Nvidia, Sequoia Capital и Lightspeed Venture Partners, а его оценка достигала $25 млрд.
Летом стартап заключил соглашения на сумму более $7 млрд со SpaceX и Nebius для получения доступа к чипам Nvidia GB300 до 2029 года. Полученные мощности используются для обучения моделей и развития концепции локальных систем для корпоративных клиентов и государственных структур.
Планы по релизу и внедрению
Публикация весов модели Beam и полной технической документации запланирована на текущий месяц. Распределение будет осуществляться через гиперскейлеров и неоклауд-провайдеры, а также через интеграции в открытые библиотеки.
Стартап ориентирует Beam на предприятия и суверенные государства, предлагая концепцию создания локальных систем на основе собственных данных организаций. Компания уже тестирует такой подход в рамках партнерства с южнокорейской группой Shinsegae Group.
Что это значит для пользователей
- Кому это полезно и что делать по-новому: модель создана для предприятий, разработчиков и госсектора, которым требуются сложные рассуждения, написание кода и запуск автономных ИИ-агентов на собственной инфраструктуре.
- Доступность и цена: компания пока не сообщила подробности о стоимости и условиях использования для конечных пользователей, пообещав опубликовать веса и технические детали в текущем месяце.
- Как попробовать или навигация: Beam является текстовой моделью и пока не поддерживает мультимодальные задачи вроде обработки изображений, в отличие от некоторых конкурентов.
- Что это меняет: Beam предлагает сопоставимую с лидерами производительность в рассуждениях, но потребляет в 3-4 раза меньше вычислительных ресурсов на инференс при работе с длинным контекстом в 1 млн токенов.
Источник: techcrunch.com
Обсудить в Telegram
