бенчмарки
Все материалы · 8 материалов
Unsloth выпустила GGUF-версии DeepSeek-V4.1-Flash-1017 Dynamic v3.1
30 октября 2026 года Unsloth опубликовала квантованные GGUF-модели DeepSeek-V4.1-1017 Dynamic V3.1 (preview) и заявила, что они точнее аналогов от ISTA на большинстве бенчмарков.
Samaya AI выпустила Sterling: финансовый агент на 3 млрд активных параметров обходит Claude Fable 5.1 по цене и качеству
30 октября 2026 года Samaya AI представила Sterling — дообученную модель для агентного финансового исследования. На бенчмарке FrontierFinance она набирает 58,9% против 55,9% у Claude Fable 5.1, а стоимость вопроса ниже почти в 11 раз.
Пользователь Reddit предсказывает волну локальных моделей перед выходом Qwen 4
31 октября 2026 года на Reddit появился пост с прогнозом: Google и другие лаборатории выпустят новые локальные модели до релиза Qwen 4, чтобы на день-два возглавить бенчмарки.
10 кодовых агентов, один Qwen 3.8 27B: по токенам разброс в 4 раза, по прохождениям — ноль
30 октября 2026 года на Reddit вышла вторая часть теста кодовых агентов на локальном llama-server с Qwen 3.8 27B. Все агенты прошли 5 задач из 5, но медианный расход токенов отличается в 4,2 раза. Разбираем механику: почему pass rate перестаёт различать агентов и что на самом деле показывает cache reuse.
Tiny Harbor: Qwen 3.8 Flash Next собрала 3D-остров на three.js за один проход
30 октября 2026 года на r/LocalLLaMA выложили прогон локальной сборки Qwen 3.8 Flash Next в NVFP4: модель сгенерировала сайт с 3D-деревней на острове и видео-рендер. Разбираем, что реально сделано, почему рельеф из одной функции высоты — удачный ход и почему один прогон нельзя называть бенчмарком.
Rivermark: как устроен бенчмарк агентной обвязки для соцсетей и полиграфии
29 октября 2026 года на Reddit описали самодельную агентную обвязку Rivermark и бенчмарк из 112 запросов на социальную и печатную графику. Разбираем механику теста, три класса входных данных и почему в сравнении Claude Code + Sonnet 5.5 с DeepSeek и GLM Flash пока нет ни одного числа.
GPT-6.1 Terra: computer use, вдвое дешевле по API и что стоит за цифрами
OpenAI 26 октября 2026 года представила GPT-6.1 Terra — модель с упором на computer use и визуальное рассуждение. Разбираем, что она делает, чем измеряли результаты и где в анонсе не хватает данных.
Kimi K3.1 Pro: веса обещают к 4 ноября, цену держат на уровне GPT-6.1 Sol
Moonshot выложила Kimi K3.1 Pro в API 23 октября 2026 года. Весов пока нет, есть цена $2/$10 за миллион токенов, балл 55 у Artificial Analysis и версия Highspeed вдвое дороже. Разбираем, что из этого проверяемо.
