Fico feliz em compartilhar o KernelFactory Um arnês que construí para resolver o teste de desempenho compartilhado por @AnthropicAI algumas semanas atrás

Resumindo, o desafio era otimizar um kernel personalizado que eles escreveram. Você pode ir bem longe conversando com Claude Code sobre isso. Em vez disso, quis construir um arnês para ver até onde você poderia chegar sem nenhum humano no circuito.

É um desafio divertido porque é bem definido e tem um padrão claro. E você precisa aprender um novo conjunto de ferramentas se quiser sair do circuito. Acabei construindo um sistema evolutivo que tentava equilibrar a exploração de um conjunto diversificado de ideias com o uso das já existentes.

No final, o harness entregou um kernel de 1297 ciclos, que supera os benchmarks iniciais estabelecidos pela equipe no repositório git. Também encontrou alguns exploits divertidos que deixariam isso ainda mais baixo, como remover a função hash do kernel de referência para não precisar calculá-la.

Há mais detalhes no post do blog, caso você tenha curiosidade. No geral, acho que minha maior lição é o quanto você pode fazer com um bom ciclo de feedback e benchmark.

Pretendo continuar mexendo nos arnês, então fique à vontade para entrar em contato se tiver um problema interessante com um loop de feedback poderoso.

@trishume obrigado por abrir o código desse problema, você pode achar o arnês acima interessante!