Рад поделиться KernelFactory! Это инструмент, который я создал, чтобы решить тест на производительность, который был предоставлен @AnthropicAI несколько недель назад.

В кратце, задача заключалась в оптимизации пользовательского ядра, которое они написали. Вы можете довольно далеко продвинуться, общаясь с Claude Code по этому поводу. Вместо этого я хотел создать систему, чтобы увидеть, насколько далеко можно зайти без участия человека.

Это интересный вызов. Он хорошо определен и имеет четкие критерии оценки. И вам нужно изучить новый набор инструментов, если вы хотите выйти из замкнутого круга. В итоге я создал эволюционную систему, которая пыталась сбалансировать исследование разнообразного набора идей и использование существующих.

В конце концов, хардварный модуль выдал ядро с 1297 циклами, что превосходит первоначальные бенчмарки, установленные командой в их репозитории git. Я остановил его в этот момент несколько произвольно, но он мог бы показать лучшую производительность с большим количеством вычислительных ресурсов. Он также нашел несколько интересных уязвимостей, которые могли бы снизить это значение еще больше, например, удаление хеш-функции из эталонного ядра, чтобы не нужно было ее вычислять.

В блоге есть еще несколько деталей, если вам интересно. В целом, я думаю, что мой главный вывод заключается в том, сколько всего можно сделать с хорошей обратной связью и эталоном.

Я планирую продолжать экспериментировать с системами управления, так что не стесняйтесь обращаться, если у вас есть интересная проблема с мощной обратной связью. cc: @trishume, спасибо за открытие этого вызова :)