Pular para o conteúdo principal
usedby

Percepta: execução de código C internalizada nos pesos de um transformer

A Percepta demonstrou um caminho de decodificação especializado que permite aos LLMs executar internamente código C arbitrário a velocidades acima de 33.000 tokens por segundo em hardware de CPU padrão (percepta.ai).

O pitch

A Percepta demonstrou um caminho de decodificação especializado que permite aos LLMs executar internamente código C arbitrário a velocidades acima de 33.000 tokens por segundo em hardware de CPU padrão (percepta.ai). O projeto busca substituir os loops externos de chamada de ferramentas por uma computação simbólica internalizada, o que na prática transforma o próprio transformer em um ambiente de execução determinístico. Essa mudança de arquitetura ataca os gargalos de latência encontrados hoje nos workflows agênticos, ao embutir a lógica de execução diretamente no mecanismo de atenção (percepta.ai).

Por dentro

O sistema usa um mecanismo chamado “Exponentially Fast Attention”, que substitui as varreduras lineares padrão do contexto por consultas logarítmicas (percepta.ai). Isso permite que o modelo processe rastros de execução com uma sobrecarga bem menor do que a geração autorregressiva tradicional.

  • A equipe verificou a execução do algoritmo húngaro em um problema de atribuição 10x10, chegando a 33.583 tok/s em uma CPU (percepta.ai).
  • A Percepta Labs é uma empresa em estágio Seed sediada na Filadélfia, com cerca de 1 a 10 funcionários e US$ 1 milhão em financiamento (Tracxn).
  • Usuários do Hacker News questionaram se as simulações internas sofrem das mesmas falhas estocásticas que as saídas padrão de LLMs (HN Comment).
  • Há um alto risco de “vaporware”, já que a variante proprietária de atenção não passou por testes de estresse de terceiros (HN Comment).

Ainda não sabemos se os pesos da “Exponentially Fast Attention” ou o compilador de C para tokens necessário serão liberados para auditoria pública (missing_info). Além disso, não há dados disponíveis comparando o consumo de memória desses registradores internos com as exigências de cache KV do GPT-5 ou do Claude 4.5 Opus (missing_info).

Nossa opinião

Deixe isso fora da produção, mas acompanhe os whitepapers. Embora a engenharia necessária para internalizar uma máquina de Turing nos pesos de um transformer seja uma façanha técnica impressionante, a utilidade prática em relação à chamada de ferramentas padrão continua não comprovada em escala corporativa. Uma equipe de menos de dez pessoas com US$ 1 milhão em financiamento dificilmente oferecerá o suporte de longo prazo necessário para uma mudança de infraestrutura central (Tracxn). É uma forma elegante de gastar uma bolsa de pesquisa, mas a maioria de nós preferiria um binário estável e uma cerveja.