Aguru AI Howto
Aguru AI est une solution logicielle sur site qui fournit des outils complets de surveillance, de sécurité et d'optimisation pour les applications basées sur LLM avec des fonctionnalités telles que le suivi du comportement, la détection d'anomalies et l'optimisation des performances.
Voir plusComment utiliser Aguru AI
Télécharger le package Aguru Safeguard: Inscrivez-vous sur le site Web d'Aguru pour télécharger le package complet. Les premiers utilisateurs peuvent obtenir un accès gratuit.
Installer le logiciel: Installez Aguru Safeguard localement sur votre système pour garantir la confidentialité et la sécurité des données.
Configurer l'infrastructure: Suivez les instructions README.md pour configurer votre infrastructure afin de router le trafic LLM via un proxy inverse. Aucune modification du code de l'application n'est requise.
Accéder à l'interface: Naviguez vers http://localhost:5000 pour accéder à l'interface Aguru Safeguard.
Surveiller le trafic LLM: Une fois configuré, Aguru Safeguard commencera automatiquement à surveiller votre trafic LLM et à détecter les anomalies.
Configurer les alertes: Configurez les alertes pour être transférées vers votre système d'alerte préféré (comme Splunk ou DataDog) pour surveiller les anomalies potentielles.
Utiliser le Playground: Expérimentez avec des invites spécifiques dans le Playground pour observer comment le système détecte les anomalies et utilisez les informations pour améliorer vos applications AI.
Optionnel : Activer le routeur LLM: Si désiré, activez la fonctionnalité de routeur LLM pour diriger automatiquement les invites vers les modèles les plus rentables tout en maintenant une performance optimale.
FAQ de Aguru AI
Aguru Safeguard est un logiciel sur site qui surveille le comportement, la performance et la sécurité des LLM. Il fournit des informations exploitables sur des aspects critiques des opérations des LLM tout en garantissant que les données restent privées et sécurisées grâce à une installation locale.
Articles populaires
Midjourney lance des tableaux d'ambiance de type Pinterest après la sortie de Patchwork
Dec 17, 2024
Google lance Whisk : Un générateur d'images IA révolutionnaire qui fusionne trois images en une
Dec 17, 2024
Google dévoile Imagen 3, son générateur d'images IA de nouvelle génération
Dec 17, 2024
Google dévoile Gemini Gems et Imagen 3 pour une créativité améliorée
Dec 17, 2024
Voir plus