llm-eval-tracker

O LLM Eval Tracker é um índice automatizado e ao vivo que descobre e cataloga frameworks, benchmarks e harnesses de avaliação de LLMs no GitHub. Ele é atualizado a cada 15 minutos por meio de um cron do GitHub Actions, fornecendo uma tabela estruturada com metadados como estrelas, linguagem e horário de atualização. O projeto usa apenas a API pública de busca do GitHub e uma GitHub Action gratuita, sem serviços externos ou APIs pagas. Ele foi projetado para engenheiros de ML que desejam se manter atualizados sem varredura manual. O mantenedor também oferece trackers ao vivo relacionados para outros tópicos, como servidores MCP, RAG e frameworks de agentes.