Ai2 выпускает OLMo 2 — конкурента Llama

Ai2 (Allen Institute for AI), некоммерческая организация, основанная покойным соучредителем Microsoft Полом Алленом, выпустила серию языковых моделей OLMo 2.

OLMo расшифровывается как Open language model, и это действительно полностью открытый ИИ. Все — от данных до кода и методов обучения — доступно для изучения и использования. Новые модели уже сравнивают с Llama от Meta*, и, по словам представителей Ai2, OLMo 2 демонстрирует лучшие результаты.

Детали:

• две модели: OLMo 7B (7 миллиардов параметров) и OLMo 13B (13 миллиардов).
• обучение: использовали 5 триллионов токенов (примерно 3,75 триллиона слов) из качественных веб-сайтов, научных статей, форумов и учебных материалов.
• задачи: OLMo 2 может писать тексты, кодировать, отвечать на вопросы, а также резюмировать документы.

OLMo 2 полностью отвечает строгим требованиям Open Source Initiative. Любой может скачать модели и использовать их, включая коммерческие проекты (лицензия Apache 2.0).

Инженеры Ai2 уверены, что открытость позволяет развивать более этичные и безопасные технологии. Несмотря на опасения, что такие модели могут быть использованы в сомнительных целях, Ai2 верит, что польза перевешивает риски.

Модели доступны для скачивания на официальном сайте Ai2.

* Деятельность Meta (руководящая компания Instagram и Facebook) запрещена в России.