FAQ de Llama Family

Question 1

Quelle est la mission de Llama Family?

Accepted Answer

La mission de Llama Family est de promouvoir le développement de l'Intelligence Artificielle Générale à travers l'open source. Ils visent à construire une plateforme ouverte pour que les développeurs et les passionnés collaborent à la création d'un écosystème open-source pour les modèles Llama.

Question 2

Avec quels types de modèles Llama Family travaille-t-elle?

Accepted Answer

Llama Family travaille avec divers modèles Llama, y compris les modèles Llama originaux open-sourcés par Meta (de tailles 7B, 13B, 34B, 70B), les modèles Code Llama spécialisés pour le code, et les modèles Atom qui améliorent les capacités linguistiques en chinois.

Question 3

Quelles ressources informatiques Llama Family fournit-elle?

Accepted Answer

Llama Family fournit un accès aux ressources GPU, y compris les séries GeForce RTX 30 et 40, avec les GPU NVIDIA H100 et A100 Tensor Core à venir bientôt.

Question 4

Qu'est-ce qu'Atom?

Accepted Answer

Atom est un modèle développé conjointement par AtomEcho et Llama Family, basé sur l'architecture Llama. Il est entraîné sur 2,7 To de corpus chinois et multilingues, avec des tailles de paramètres de 1B, 7B et 13B, visant à améliorer les capacités linguistiques en chinois.

Question 5

Sur combien de tokens Llama 2 a-t-il été entraîné?

Accepted Answer

Llama 2 a été entraîné sur 2,0 To de tokens à travers toutes ses tailles de modèle (7B, 13B, 34B, 70B).

Question 6

Quels sont les différents types de modèles Code Llama?

Accepted Answer

Code Llama se décline en trois types : Modèle de Base (pour les tâches générales de génération de code), Modèle Python (spécialisé pour Python), et Modèle Instruct (affiné avec des instructions humaines et des données de synthèse de code auto-instructif).

Llama Family Howto

Plus d'informations

Comment utiliser Llama Family