Kimi K3.1 Pro догнала Opus 5.5? Проверил на 3 проектах
Владилен Минин и Тебя не заменят
0:00 / 0:00
Kimi K3.1 Pro догнала Opus 5.5? Проверил на 3 проектах
5 233 просмотра · 7 ч назад
Владилен Минин и Тебя не заменят
5 233 просмотра · 7 ч назад
Kimi K3.1 Pro против Claude Opus 5.5 и GPT-6 Astra. Китайская нейросеть стоит в 2 раза дешевле Opus, а на своих бенчмарках идёт почти вровень с ним.
Проверил на трёх сложных проектах: игра Tower Defense, клон Figma и 3D-глобус на 67 тысячах реальных авиамаршрутов.
Нейросети за рубли и без VPN: https://simple-claw.ru/
Промпты и датасеты из видео: https://hollow-bathroom-b55.notion.si...
00:00 Kimi K3.1 Pro в 2 раза дешевле Opus
00:39 Мой бенчмарк: 3 сложных проекта
01:46 Бенчмарки Kimi простыми словами
04:07 Tower Defense: GPT-6 Astra
04:54 Tower Defense: Opus 5.5
05:38 Tower Defense: Kimi K3.1 Pro
06:47 Клон Figma: GPT-6 Astra
08:29 Клон Figma: Opus 5.5
09:42 Клон Figma: Kimi K3.1 Pro
11:04 3D-глобус: GPT-6 Astra
12:17 3D-глобус: Opus 5.5
13:18 3D-глобус: Kimi K3.1 Pro
14:15 Итоги: кто на каком месте
14:31 Почему я всё равно оставлю Kimi
О чём ролик
Moonshot AI выложила бенчмарки, где Kimi K3.1 Pro во многих тестах идёт вровень с Opus 5.5. При этом вход стоит $2 за миллион токенов против $4 у Opus. Но бенчмарки публикует сам производитель и показывает самые выгодные. Поэтому я дал Kimi, Opus и GPT-6 Astra одинаковые задания и сравнил, что у них получилось на деле.
Что внутри
что значат тесты с официальной картинки Kimi, простыми словами
Tower Defense с волнами по 2000 врагов: GPT-6 Astra собрала игру быстрее всех, за 17 минут, Opus работал примерно вдвое дольше, но игра у него вышла заметно лучше
Kimi делала игру около 40 минут, упёрлась в контекст и после «продолжай» работала ещё примерно столько же
клон Figma прямо в браузере со стресс-тестом на 5000 фигур
3D-глобус на открытых данных OpenFlights: у Opus на экране 67 тысяч маршрутов сразу
почему Kimi заняла третье место, но часть рутины я всё равно отдам ей, а не Claude
Итоги (оценка моя: как проект работает и как выглядит)
Tower Defense: 1. Opus 5.5, 2. GPT-6 Astra, 3. Kimi K3.1 Pro
Клон Figma: 1. Opus 5.5, 2. Kimi K3.1 Pro, 3. GPT-6 Astra
3D-глобус: 1. Opus 5.5, 2. GPT-6 Astra, 3. Kimi K3.1 Pro
Для кого
Для тех, кто пишет код или автоматизирует работу с нейросетями и считает деньги на токены: где хватит модели подешевле, а где пока нужен Opus.
Ссылки из ролика
Блог Kimi K3.1 Pro с бенчмарками: https://www.kimi.ai/blog/kimi-k3-1-pro
Kimi Code: https://www.kimi.com/code/docs
Данные для глобуса: OpenFlights, https://openflights.org (лицензия ODbL)
Будете переходить на Kimi или остаётесь на Opus? Напишите в комментариях.