Тест qwen3.5:9b: Пользователи, права, PAM, sudo — 99%
23.05.2026
Базовая модель:
qwen3.5:9b(сток, без дообучения). Полный прогон на GPU 3090.
Метод: где сток ломается — там реальная дыра. Под неё мы точечно готовим трейсы для нашей модели oni-main.
Что тестировали
userdel/getent, login shell, группы, setuid/lsattr, world-writable, права и аудит доступа.
Результаты прогона
| Метрика | Значение |
|---|---|
| Прогнано кейсов | 1175 |
| Прошло (ok) | 1167 |
| Доля ok | 99% |
| Провалы по классам | degenerate_repeat: 5, api_error: 3 |
Классы провалов: degenerate_repeat — модель зацикливается и повторяет одно и то же; api_error — обрыв или таймаут генерации; empty — пустой ответ; length — упёрлась в лимит длины.
Где сток спотыкается (примеры кейсов)
- Покажи состояние
userdelбез изменения системы. - Диагностируй конфликт
getent passwdс другим сервисом/ресурсом → покажи владельца → итог. - Сделай dry-run изменения setuid и покажи, что реально изменится.
- Сделай композит поиска world-writable: read-only факт → минимальный fix после подтверждения → итог.
Что закрываем в oni-main
Под эти провалы готовим трейсы в едином формате: read-only диагностика → минимальный фикс только после подтверждения → пост-проверка одной командой. Цель — убрать зацикливания и обрывы именно на краевых кейсах домена «Пользователи, права, PAM, sudo» и подтянуть оставшиеся 1% к стабильному поведению.
Это часть серии: один разбор на каждый домен. Прогон от 2026-05-23, всего 24 412 кейсов по 21 домену, сток — 98% ok.
