Alternativas grátis para LangSmith

O LangSmith, da LangChain, é uma plataforma online para quem constrói aplicações sobre modelos de linguagem. Desenvolvedores usam para rastrear passo a passo o que a aplicação fez, avaliar respostas com conjuntos de teste, gerenciar prompts e acompanhar o comportamento ao longo do tempo. Os planos são pagos, e os seus dados ficam guardados no serviço.

Antes de trocar, confira:

• Como o seu código envia os rastros hoje. Pode ser preciso mudar essa instrumentação, e algumas ferramentas esperam bibliotecas diferentes.
• Se dá para exportar seus conjuntos de dados, resultados de avaliação e versões de prompts, para o histórico não ficar para trás.
• Se você for hospedar a ferramenta, quem vai cuidar dos servidores, do banco de dados e das atualizações.
• O controle de acesso da equipe e o que os seus prompts e dados de usuários podem conter, antes de decidir onde guardá-los.
• Seu uso do LangChain ou do LangGraph, que pode influenciar o quanto cada opção se encaixa.

O Dify está entre os nomes da lista abaixo, que reúne jeitos diferentes de fazer esse trabalho.