Confident AI 사용 방법
DeepEval 설치: 'pip install -U deepeval'을 실행하여 DeepEval 라이브러리를 설치합니다
필요한 모듈 가져오기: deepeval에서 assert_test, metrics 및 LLMTestCase를 가져옵니다
테스트 케이스 생성: 입력 및 actual_output으로 LLMTestCase 객체를 생성합니다
평가 메트릭 정의: 원하는 매개변수로 HallucinationMetric과 같은 메트릭 객체를 생성합니다
단언 실행: assert_test()를 사용하여 메트릭에 대해 테스트 케이스를 평가합니다
테스트 실행: 'deepeval test run test_file.py'를 실행하여 테스트를 수행합니다
결과 보기: 콘솔 출력에서 테스트 결과를 확인합니다
Confident AI 플랫폼에 로그 기록: 결과를 Confident AI에 기록하기 위해 @deepeval.log_hyperparameters 데코레이터를 사용합니다
결과 분석: Confident AI 플랫폼에 로그인하여 자세한 분석 및 통찰력을 확인합니다
Confident AI 자주 묻는 질문
Confident AI는 대형 언어 모델(LLM)을 위한 오픈 소스 평가 인프라를 제공하는 회사입니다. 그들은 개발자가 10줄 이하의 코드로 LLM을 단위 테스트할 수 있는 도구인 DeepEval을 제공합니다.
Confident AI 월간 트래픽 동향
Confident AI는 보고된 달에 89,361회 방문으로 트래픽이 -32.0%의 큰 폭의 하락을 겪었습니다. Y Combinator로부터 받은 50만 달러의 시드 라운드 투자금이 트래픽에 직접적인 영향을 미치지는 않았을 수 있으나, 주목할 만한 업데이트나 새로운 기능의 부재가 이러한 하락에 영향을 미쳤을 수 있습니다.
과거 트래픽 보기
더 보기