AI Radar
Nous Research дообучила Qwen3.8-27B и выпустила Arete-27B
Nous Research дообучила Qwen3.8-27B: в тестах Arete-27B доля ответов с прокитайской пропагандой упала с 22% до менее 1%. Результат интересен тем, кто изучает поведение моделей после дообучения.
Nous Research получила Arete-27B, дообучив Qwen3.8-27B методом supervised fine-tuning: модель обучали на примерах желаемых ответов. Для этого команда использовала 53 млн токенов. В тестах доля ответов с прокитайской пропагандой снизилась с 22% до менее 1%.
По результатам тех же тестов общие возможности модели сохранились. Команда считает, что выявленную политическую склонность добавили на позднем этапе обучения и её удалось существенно ослабить дообучением. Результат относится к проверенной модели и использованным тестам: из него нельзя вывести, что тот же метод одинаково сработает для любой модели.
Почему это важно
Исследователи моделей получили пример того, как supervised fine-tuning меняет политическую направленность ответов. В тестах Arete-27B доля ответов с прокитайской пропагандой упала с 22% до менее 1% при сохранении общих возможностей.
Мнение редакции
Мнение редакцииОценка склонности модели к политическим формулировкам зависит от того, какие вопросы ей задают. Следующим полезным тестом для Arete-27B были бы новые темы и формулировки, которых не было при дообучении.
Первоисточники и подтверждения
Подборку проверяет редакция DSML. AI помогает дедуплицировать сигналы и готовить текст, но опубликованный выпуск остаётся редакционным продуктом, а не лентой отдельных каналов.