Testámos se os agentes de codificação com ferramentas CLI são tudo o que precisa para tarefas complexas de pesquisa e análise de documentos 🧪 O nosso novo benchmark SemTools utilizou 1000 artigos do @arxiv para comparar agentes com e sem capacidades de pesquisa semântica: 🔍 Agentes com pesquisa semântica forneceram respostas mais detalhadas e abrangentes em todos os tipos de perguntas ⚡ A abordagem baseada em CLI prova ser incrivelmente poderosa em relação ao esforço - as ferramentas Unix dão aos agentes grep, find e navegação no sistema de arquivos de forma nativa 📊 Tarefas complexas de cruzamento de referências e análise temporal mostraram a maior melhoria com ferramentas de pesquisa semântica 🛠️ O SemTools adiciona capacidades de análise (via LlamaParse) e pesquisa semântica diretamente a agentes de linha de comando como @claudeai Code e Gemini CLI A combinação de ferramentas Unix existentes mais capacidades de pesquisa semântica pode muitas vezes substituir configurações RAG mais complexas, sendo mais rápidas de implementar e mais flexíveis de usar. Leia os resultados completos do benchmark e a metodologia: