Kimi K3 строит сложные 3D-объекты в Minecraft, оперируя только текстом

Исследователь искусственного интеллекта под ником aizk из команды Featherless AI продемонстрировал возможности открытой модели Kimi K3, заставив ее создавать сложные трехмерные объекты в песочнице Minecraft. Примечательно, что нейросеть не видит саму игру, а оперирует исключительно текстовыми токенами. Для строительства конструкций алгоритм генерирует код на JavaScript, который затем автоматически компилируется в нативные функции игры и поблочно размещает элементы в виртуальном мире.

От примитивных коробок к детализированным мирам

В ходе испытаний модель успешно справилась с генерацией детализированных каньонов, действующих вулканов со столбами дыма и лавой, традиционных японских ворот тории на воде и жилых домов с проработанными интерьерами. Ранее доступные модели с открытым исходным кодом могли возводить лишь примитивные коробки и моментально теряли целостность при попытке собрать что-то требующее глубокого пространственного мышления.

Подобные эксперименты в видеоиграх стали практичной заменой синтетическим тестам крупных ИИ-лабораторий, результаты которых нередко подгоняются или намеренно отбираются для красивой отчетности. В Minecraft невозможно скрыть ошибки генерации: игра сразу дает четкий визуальный результат и подтверждает, построена ли структура по заданному описанию и насколько корректно расположены блоки в пространстве.

Пространственное мышление в 3D остается одной из наиболее трудных задач для чисто языковых моделей. Этот вызов напрямую связан с алгоритмами навигации для робототехники и автопилотов, где требуется ориентироваться в физическом окружении. Способность текстовой нейросети не просто извлекать заученные шаблоны, а адаптироваться к незнакомым вводным и строить сложные объекты считается важным шагом к формированию сильного искусственного интеллекта.

Как отметил автор проекта aizk, ключевой прорыв заключается именно в открытости модели, так как еще 2 месяца назад подобные задачи были не под силу общедоступным нейросетям. По словам разработчика, следующим рубежом для алгоритмов в проекте Mojang станет оптимизация сложных схем и механизмов из красного камня.