Como Usar Confident AI
Instalar o DeepEval: Execute 'pip install -U deepeval' para instalar a biblioteca DeepEval
Importar módulos necessários: Importe assert_test, metrics e LLMTestCase do deepeval
Criar um caso de teste: Crie um objeto LLMTestCase com input e actual_output
Definir métrica de avaliação: Crie um objeto métrica, por exemplo, HallucinationMetric, com os parâmetros desejados
Executar afirmação: Use assert_test() para avaliar o caso de teste em relação à métrica
Executar testes: Execute 'deepeval test run test_file.py' para executar os testes
Ver resultados: Verifique os resultados dos testes na saída do console
Registrar na plataforma Confident AI: Use o decorador @deepeval.log_hyperparameters para registrar resultados no Confident AI
Analisar resultados: Faça login na plataforma Confident AI para ver análises e insights detalhados
Perguntas Frequentes sobre Confident AI
A Confident AI é uma empresa que fornece infraestrutura de avaliação de código aberto para Modelos de Linguagem de Grande Escala (LLMs). Eles oferecem o DeepEval, uma ferramenta que permite aos desenvolvedores testar unidades de LLMs em menos de 10 linhas de código.
Artigos Populares
Ideogram Canvas: Uma Nova Era para Arte Gerada por IA
Oct 23, 2024
Lançamento Revolucionário do Stable Diffusion 3.5 pela Stability AI
Oct 23, 2024
Genmo Lança Mochi 1: Novo Gerador de Vídeo com IA de Código Aberto
Oct 23, 2024
Ferramenta de Captura de Movimento de Expressões Faciais com IA Runway's Act-One
Oct 23, 2024
Ver Mais