Отчёт · сравнение LLM на реальной вёрстке
Сайт на Hugo, готовые блоки и стили, одна задача: обновить страницу внедрения Битрикс24. Переиспользовать существующее, добавить минимум нового кода. После каждой модели — саморевью на той же модели.
Видеоразбор на нашем канале в Rutube. Ниже — та же история текстом, со ссылками на живые страницы.
Один и тот же бриф получили семь моделей: Opus 5.5, Astra 6, Kimi 3.1 Pro, DeepSeek 4.1-1017, Qwen3.8-Flash, Qwen3.8-Max и GLM-5.3-Flash. Задача — не «нарисовать лендинг», а вписаться в живой сайт: переиспользовать существующие блоки и стили, минимально расширять CSS и JS. Каждая модель работала в отдельной ветке git, сборка сайта — 119 страниц.
Qwen3.8-Flash работала локально на нашем железе, но цену для честного сравнения считали по тарифам API. Остальные шли через API, часть — по подпискам, поэтому колонка «цена» — это верхняя граница «если платить за каждый токен».
| id | модель | время | токенов | цена | оценка |
|---|---|---|---|---|---|
| qwmaxc | Qwen3.8-Max | 285 мин | 27 963 588 | $10.38 | 3.73 |
| kimic | Kimi k3.1-pro | 76 мин | 6 261 041 | $2.63 | 3.70 |
| glm53c | GLM-5.3-Flash | 106 мин | 19 804 125 | $0.70 | 3.30 |
| dsf41c | DeepSeek V4.1-Flash | 145 мин | 34 393 938 | $0.40 | 3.20 |
| opus55c | Opus 5.5 | 77 мин | 9 018 854 | $14.61 | 3.09 |
| astra6c | Astra 6 | 118 мин | 13 255 930 | $23.03 | 3.00 |
| qw38c | Qwen3.8-Flash | 204 мин | 20 383 014 | $0.63 | 2.82 |
Оценки — заказчика, по блокам страницы (0–5). Цена — по розничным прайсам провайдеров за input/output/cache-read.
Каждая страница открывается как самостоятельная сборка — со своим CSS и JS, поэтому изменения стилей сайта эти демо не затрагивают.
Единственная считает первый год целиком: TCO-таблица плюс отдельная таблица тарифов.
Время 285 мин · 27 963 588 токенов · $10.38 по розничным тарифам · оценка заказчика 3.73
«Нить диалога»: сквозной маршрут сообщения в сделку и следующее действие.
Время 76 мин · 6 261 041 токенов · $2.63 по розничным тарифам · оценка заказчика 3.70
Смета первого года и честная оговорка про почтовый черновик вместо формы.
Время 106 мин · 19 804 125 токенов · $0.70 по розничным тарифам · оценка заказчика 3.30
Сравнение «три подрядчика против одного контура» и таблица сметы с часами.
Время 145 мин · 34 393 938 токенов · $0.40 по розничным тарифам · оценка заказчика 3.20
CSS-схема цепочки «Сообщение → Лид → Менеджер → Напоминание» с подписью отвечающего.
Время 77 мин · 9 018 854 токенов · $14.61 по розничным тарифам · оценка заказчика 3.09
Контур как маршрут лида: три слоя связаны в один поток цены разведены на работы и лицензии.
Время 118 мин · 13 255 930 токенов · $23.03 по розничным тарифам · оценка заказчика 3.00
Единственная с рабочим калькулятором: 4 вопроса → пакет вилка часы подписки.
Время 204 мин · 20 383 014 токенов · $0.63 по розничным тарифам · оценка заказчика 2.82
Разница в цене — 57 раз при сопоставимом результате: Astra 6 обошлась в $23.03, DeepSeek 4.1 — в $0.40. По оценкам заказчика вперёд вышли Qwen3.8-Max (3.73) и Kimi 3.1 Pro (3.70), замыкает Qwen3.8-Flash (2.82).
Главное, что показало ревью: модели уверенно воспроизводят вёрстку, но спотыкаются на механике — формы, которые не доносят заявку, и цифры, которых нет в источнике. Поэтому «красиво на скриншоте» и «готово к продакшену» здесь расходятся сильнее, чем хотелось бы.
Отчёт собран отдельно от сайта: у него собственный встроенный CSS, у страниц — свои сборки. Правки темы сайта этот материал не меняют.