Тесты Qwen 3.8 27B на RTX 5090 с квантизацией

Пхах сейчас меньше 120к контекста нет смысла даже запускать


Оригинал в Telegram

Да и 3.6 в целом тоже если это разработка или агент


Оригинал в Telegram

Кстати, да, раньше потребности в этом не было, но теперь уже хочется.


Оригинал в Telegram

Стратовый промт + навыки это зачастую уже -30к контекста


Оригинал в Telegram

3.6 работал на моих задачах с этим контекстом на ура, а вот 3.8 постоянно упирается в ограничения, и это обе модели без режима мышления.


Оригинал в Telegram

Вызов инструмента от 1 до 10к может сьесть


Оригинал в Telegram

24К у меня.


Оригинал в Telegram

Я сужу по задачам разработки


Оригинал в Telegram

Для агентов проще реально дипсик использовать флеш


Оригинал в Telegram

Hermes доработал в последнем обновлении методы работы с сжатием контекста, ещё не сильно погрузился в этот вопрос, но позволяет делать компрессию не только когда достигается предел, но и в промежуточных шагах. Я эту возможность сейчас использую, и в большинстве случаев удается держать контекст в пределах 65тыс., но иногда крупные проекты/скиллы или инструменты могут сильно вываливаться за пределы, так как на них нет ограничений на выходные данные.


Оригинал в Telegram

Я тестирую специально локальные модели, мучаюсь, но ем кактус, так как готовлю их для работы с “чувствительными” данными компании и туда могут попадать в том числе контакты клиентов, а это запрещено выпускать за контур компании, поэтому облачные не подходят.


Оригинал в Telegram

Ну каждый на своем кактусе прыгает…


Оригинал в Telegram

В опенкло разраб писал что минимум для работы агента 60к только для запуска, где-то в доках читал у него


Оригинал в Telegram

в гермесе вроде поменьше была прожорливасть и там пограмотней работа уже в самом агенте. Это действительно заметно и работает. Вообще гермес самодостаточен, все что встроено, все работает


Оригинал в Telegram

Было 25к вроде но там несколько раз оптимизировали


Оригинал в Telegram

Как мы и говорили еще несколько месяцев назад, все плагины и всякие сторонние допы уходят в небытие. Навыки, контекст, память уже в самих агентах настроена не плохо.


Оригинал в Telegram

[2026/08] Qwen3.8-27B support: Qwen’s new dense VL (Gated DeltaNet + Gated Attention, native vision) runs in 3.33GB of VRAM, measured end to end on one RTX 3090. Needs transformers 5.8+.


Оригинал в Telegram

только что всего лишь примерно на четверти сессии в приложении чат-версии Qwen впервые упёрся в лимит. написано, возвращайся через девять часов. похоже что и эти - всё


Оригинал в Telegram

Или запросы выросли)


Оригинал в Telegram

Чем больше знаешь, тем больше хочешь


Оригинал в Telegram