Kimi K3.1 Pro и Opus 5.5 создали одинаковые 13 приложений (реальные результаты)
Prompt Engineering
0:00 / 0:00
Kimi K3.1 Pro и Opus 5.5 создали одинаковые 13 приложений (реальные результаты)
41 533 просмотра · 19 ч назад
Prompt Engineering
251 тыс. подписчиков
41 533 просмотра · 19 ч назад
Kimi K3.1 Pro против Claude Opus 5.5 на 13 долгосрочных задачах агентного программирования. Обе модели работали в одной и той же среде Claude Code, с одинаковыми подсказками, одинаковыми настройками сложности и одинаковыми скриптами оценки. Изменилась только строка модели.
Kimi K3.1 Pro стоит вдвое дешевле, чем Opus 5.5 (2 доллара / 10 долларов за миллион входных/выходных токенов против 4 долларов / 20 долларов). По всем 13 задачам это обошлось в 45,91 доллара против 83,46 доллара у Opus, что составляет около 55% от общей суммы, и от 28% до 93% в зависимости от задачи. Причина в кэшировании: около 98% всего, что считывали обе модели, поступало из кэша, а кэшированные токены стоили 0,20 доллара за миллион в обеих моделях.
Что я тестировал:
Воспроизведение исследования: Выращивание нейронных клеточных автоматов, PPO с нуля на MuJoCo Ant, столкновение Млечного Пути и Андромеды
3D в коде без 3D-программного обеспечения: SDF-дракон из одного концептуального изображения, живая планета, лаборатория физики портала, механические часы
Внешний инструмент: две сцены Blender, созданные и доработанные на Python
Фронтенд: три веб-сайта, перестроенные из одного скриншота, и сайт, созданный в соответствии со спецификацией 33 правил
Некоторые результаты:
Ant-v5: Opus 7435 против Kimi 5023 (Opus обучался в 4 раза больше шагов)
Совпадение силуэта SDF-дракона: Opus 0,85 / 0,82 против Kimi 0,65 / 0,62
Галактика: Kimi выбрал приблизительный метод, и его угловой момент изменился на 31,85%
Комната для чтения Blender: Изображение Kimi, на мой взгляд, сильнее 77% от стоимости проекта Opus
Краткое изложение 33-го правила: проект Opus прошел 33/33; Kimi выполнила 31 из 33 заданий, но сообщила о результатах 33 из 33
Разделы:
0:00 Kimi K3.1 Pro против Opus 5.5
1:23 Что такое задача с длительным горизонтом
2:00 Четыре группы задач
2:27 Настройка: тот же код Клода, меняется только модель
3:22 Исследование: Развитие нейронных клеточных автоматов
4:36 Обучение с подкреплением: Муравей против Полугепарда
5:42 Повторное сражение муравьев
6:46 Столкновение галактик и сохранение энергии
8:35 3D в коде: дракон SDF
10:18 Миры WebGL: планета, портал и часы
11:39 Почему Kimi потребовалось в 3-4 раза больше времени на 3D
13:16 Blender: читальный зал и клавиатура
15:54 Фронтенд: веб-сайты с одного скриншота
16:58 Краткое изложение правила 33 и ложные 33/33
18:28 Реальные Стоимость всех 13 задач
19:36 Почему половина цены — это не половина счета: кэширование
21:58 Предостережения
22:57 Четыре правила использования Kimi K3.1 Pro в Claude Code
Авторы:
Эксперимент с драконом SDF: Кинан Крейн. Концепт-арт: Иниго Килес (CC0).
Развитие нейронных клеточных автоматов: Мордвинцев и др., Distill 2020. https://distill.pub/2020/growing-ca/
Цены на Kimi K3.1 Pro: https://platform.kimi.ai
Gemini 4 Argon на многих из тех же задач: • Google is BACK! (Gemini 4 Argon - Fully Te...
#Kimi #ClaudeCode #AIcoding