LiteLLM Nasıl Kullanılır
LiteLLM, OpenAI formatını kullanarak çeşitli sağlayıcılardan 100'den fazla büyük dil modeli ile etkileşimde bulunmak için birleşik bir API sağlayan açık kaynaklı bir kütüphane ve proxy sunucusudur.
Daha Fazla GösterLiteLLM Nasıl Kullanılır
LiteLLM'yi Kurun: LiteLLM kütüphanesini pip kullanarak kurun: pip install litellm
Ortam değişkenlerini içe aktarın ve ayarlayın: litellm'i içe aktarın ve API anahtarları için ortam değişkenlerini ayarlayın: import litellm, os; os.environ['OPENAI_API_KEY'] = 'your-api-key'
API çağrısı yapın: API çağrısı yapmak için completion() fonksiyonunu kullanın: response = litellm.completion(model='gpt-3.5-turbo', messages=[{'role': 'user', 'content': 'Merhaba'}])
Akış yanıtlarını yönetin: Akış yanıtları için stream=True ayarlayın: response = litellm.completion(model='gpt-3.5-turbo', messages=[{'role': 'user', 'content': 'Merhaba'}], stream=True)
Hata yönetimini ayarlayın: Hataları yönetmek için OpenAIError ile try-except bloklarını kullanın: try: litellm.completion(...) except OpenAIError as e: print(e)
Geri çağırmaları yapılandırın: Günlükleme için geri çağırmaları ayarlayın: litellm.success_callback = ['helicone', 'langfuse']
LiteLLM Proxy'yi dağıtın: LiteLLM proxy sunucusunu dağıtmak için Docker'ı kullanın: docker run -e LITELLM_MASTER_KEY='sk-1234' ghcr.io/berriai/litellm:main
Model yönlendirmesini yapılandırın: Farklı sağlayıcılar için model yönlendirmesini ve API anahtarlarını ayarlamak için bir config.yaml dosyası oluşturun
Proxy sunucusunu kullanın: Dağıtılmış LiteLLM proxy'nize OpenAI SDK veya curl komutları kullanarak API çağrıları yapın
LiteLLM SSS
LiteLLM, geliştiricilerin 100'den fazla farklı LLM sağlayıcısıyla (OpenAI, Azure, Anthropic gibi) standart bir OpenAI uyumlu format kullanarak etkileşimde bulunmalarını sağlayan birleşik bir API ve proxy sunucusudur. Yük dengeleme, harcama takibi ve sağlayıcılar arasında tutarlı hata yönetimi gibi özellikler sunarak LLM entegrasyonunu basitleştirir.
LiteLLM Aylık Trafik Trendleri
LiteLLM, Şubat ayında ziyaretlerde %5,2'lik bir artış göstererek 269 bin ziyaretçiye ulaştı. Belirli ürün güncellemeleri veya dikkat çekici pazar faaliyetleri olmaksızın, bu hafif büyüme 2025'te AI araçlarının artan kullanımı ve genel pazar trendleriyle tutarlılık göstermektedir.
Geçmiş trafiği görüntüle
Popüler Makaleler

Google'ın Gemma 3'ü: Şimdiye Kadarki En Verimli Yapay Zeka Modelini Keşfedin | Kurulum ve Kullanım Kılavuzu 2025
Mar 18, 2025

AI Ajanı Manus Davetiye Kodu Nasıl Alınır | 2025 En Son Kılavuz
Mar 12, 2025

Mart 2025'te Ücretsiz Merlin AI Kupon Kodları ve Nasıl Kullanılır | AIPURE
Mar 10, 2025

Mart 2025'te Ücretsiz Pixverse Promosyon Kodları ve Nasıl Kullanılır
Mar 10, 2025
Daha Fazla Göster