runelay

runelayvsExecutorBenchmark · 14 nov. 2026

runelay vs Executor, medido

Os mesmos 11 servidores MCP (125 tools) atrás de cada um, os dois self-hosted com Docker na mesma máquina.

2,6xmenos tokens de contexto
10xchamadas mais rápidas
60xbusca mais rápida
8,4xmenos RAM parado

Contexto que seu agente paga ao conectar

Sem gateway, 11 servidores direto44.43442x
Só o MCP do GitHub3.5483,4x
Executor2.7292,6x
runelay1.0451x

Todas as medições

runelayExecutor
  1. Tokens no contexto ao conectar125 tools atrás do gateway 1.045 2.729 tokens 2,6x menos
  2. Achar uma tool e o schematokens das 2 chamadas 576 851 tokens 1,5x menos
  3. Chamada de tool, medianapelo gateway, localhost 6,6 68 ms 10x mais veloz
  4. Busca nas 125 toolsmediana, mesma busca 3,8 231 ms 60x mais veloz
  5. RAM paradocontainer, 60 s depois de subir 86 723 MiB 8,4x menos
  6. Do zero ao endpointimagem já baixada 2,1 4,9 s 2,3x mais veloz

Tamanho da imagem, atualizado. Desde o runelay 0.3.3 (15 nov. 2026) a imagem tem 66 MB de download, contra 278 MB antes e 80 MB do Executor. Medido no registry. As outras linhas são da rodada de 14 nov. com a 0.3.2.

Composio. Fora desta rodada: o self-hosting do Composio é contrato Enterprise, e a nuvem dele não se compara a dois containers locais.

Ambiente do teste

8 vCPU · 16 GB de RAMDocker, localhostrunelay 0.3.2 · Executor 2.0.0-beta.5114 nov. 2026
  1. Tokens: tiktoken o200k_base (cl100k_base a menos de 3%) sobre instruções e definições de tools enviadas ao conectar.
  2. Latência: mediana de 100 execuções depois de 5 de aquecimento.
  3. Busca em todos os apps. Restrita a um app, o Executor leva 28 ms (7x).
  4. Setup: mediana de 3 execuções.
  5. Seu hardware e suas tools vão dar outros números. Produtos diferentes, não um ranking de qualidade.