Confident AI Howto
WebsiteOther
Confident AI adalah infrastruktur evaluasi open-source untuk LLM yang memungkinkan pengembang untuk melakukan unit test dan benchmarking model AI dengan mudah.
Lihat Lebih BanyakCara Menggunakan Confident AI
Instal DeepEval: Jalankan 'pip install -U deepeval' untuk menginstal pustaka DeepEval
Impor modul yang diperlukan: Impor assert_test, metrics, dan LLMTestCase dari deepeval
Buat kasus uji: Buat objek LLMTestCase dengan input dan actual_output
Tentukan metrik evaluasi: Buat objek metrik, misalnya HallucinationMetric, dengan parameter yang diinginkan
Jalankan pernyataan: Gunakan assert_test() untuk mengevaluasi kasus uji terhadap metrik
Eksekusi pengujian: Jalankan 'deepeval test run test_file.py' untuk mengeksekusi pengujian
Lihat hasil: Periksa hasil pengujian di output konsol
Catat ke platform Confident AI: Gunakan @deepeval.log_hyperparameters decorator untuk mencatat hasil ke Confident AI
Analisis hasil: Masuk ke platform Confident AI untuk melihat analitik dan wawasan yang lebih mendetail
FAQ Confident AI
Confident AI adalah perusahaan yang menyediakan infrastruktur evaluasi sumber terbuka untuk Model Bahasa Besar (LLM). Mereka menawarkan DeepEval, alat yang memungkinkan pengembang untuk menguji unit LLM dalam kurang dari 10 baris kode.
Artikel Populer
Black Forest Labs Memperkenalkan FLUX.1 Tools: Toolkit Generator Gambar AI Terbaik
Nov 22, 2024
Microsoft Ignite 2024: Memperkenalkan Azure AI Foundry Membuka Revolusi AI
Nov 21, 2024
OpenAI Meluncurkan ChatGPT Advanced Voice Mode di Web
Nov 20, 2024
Platform Chat Multi-AI AnyChat Menampilkan ChatGPT, Gemini, Claude dan Lainnya
Nov 19, 2024
Lihat Selengkapnya