
Grok 2.5 (OSS Ver.)
Grok 2.5 là mô hình ngôn ngữ lớn mã nguồn mở mạnh mẽ của xAI, có 314B tham số với kiến trúc Mixture-of-Experts, được phát hành dưới dạng mô hình tốt nhất của họ từ năm ngoái theo giấy phép cộng đồng.
https://huggingface.co/xai-org/grok-2?ref=producthunt&utm_source=aipure

Thông tin Sản phẩm
Đã cập nhật:Aug 26, 2025
Grok 2.5 (OSS Ver.) là gì
Grok 2.5 thể hiện đóng góp đáng kể của xAI cho AI mã nguồn mở, là một mô hình quy mô lớn 500GB, trước đây là mô hình hoạt động tốt nhất của họ. Được xây dựng trên kiến trúc Mixture-of-Experts (MoE) với 314 tỷ tham số, nó có 8 chuyên gia với 2 chuyên gia hoạt động để suy luận, dẫn đến khoảng 115B tham số hoạt động trong quá trình hoạt động. Mô hình duy trì các khả năng cốt lõi tương tự như người tiền nhiệm Grok-1 trong khi được cung cấp cho các nhà phát triển và nhà nghiên cứu theo thỏa thuận giấy phép cộng đồng.
Các Tính năng Chính của Grok 2.5 (OSS Ver.)
Grok 2.5 là một mô hình ngôn ngữ lớn mã nguồn mở được xAI phát hành, có khoảng 314 tỷ tham số tổng thể trong kiến trúc Hỗn hợp Chuyên gia (MoE) với 8 chuyên gia (2 hoạt động cho suy luận). Mô hình yêu cầu tài nguyên tính toán đáng kể (8 GPU với >40GB bộ nhớ mỗi GPU) và có sẵn với trọng số khoảng 500GB, được cấp phép theo Thỏa thuận Giấy phép Cộng Đồng Grok 2.
Kiến trúc MoE: Sử dụng kiến trúc Hỗn hợp Chuyên gia tham số 314 tỷ với 8 chuyên gia, trong đó 2 chuyên gia hoạt động trong quá trình suy luận, dẫn đến 115 tỷ tham số hoạt động
Động cơ suy luận nâng cao: Tương thích với động cơ suy luận SGLang (v0.5.1+) hỗ trợ các tính năng như lượng tử fp8 và phần cuối triton attention
Mẫu trò chuyện chuyên biệt: Triển khai cấu trúc mô hình được đào tạo sau yêu cầu các mẫu trò chuyện cụ thể để tương tác và tạo phản hồi tối ưu
Các Trường hợp Sử dụng của Grok 2.5 (OSS Ver.)
Nghiên cứu và Phát triển: Cho phép các nhà nghiên cứu và nhà phát triển AI nghiên cứu và thực nghiệm với các mô hình ngôn ngữ quy mô lớn và kiến trúc MoE
Tinh chỉnh mô hình: Phục vụ như một mô hình cơ sở cho các tổ chức muốn phát triển các ứng dụng AI chuyên biệt thông qua tinh chỉnh
Nghiên cứu học thuật: Cung cấp cơ hội cho các tổ chức học thuật nghiên cứu các kiến trúc AI tiên tiến và khả năng của chúng
Ưu điểm
Khả năng sẵn có mã nguồn mở cho phép cộng đồng truy cập và phát triển
Kiến trúc MoE tiên tiến với số lượng tham số đáng kể
Hỗ trợ các kỹ thuật tối ưu hóa hiện đại như lượng tử fp8
Nhược điểm
Yêu cầu tài nguyên tính toán đáng kể (8 GPU với >40GB bộ nhớ)
Yêu cầu dung lượng lưu trữ lớn (500GB)
Khả năng tiếp cận hạn chế cho người có sở thích vì yêu cầu phần cứng
Cách Sử dụng Grok 2.5 (OSS Ver.)
Kiểm tra Yêu cầu Hệ thống: Đảm bảo bạn có 8 GPU với ít nhất 40GB bộ nhớ mỗi GPU, vì Grok 2 yêu cầu tài nguyên tính toán đáng kể với TP=8 (song song hóa tensor)
Tải xuống Trọng số Mô hình: Chạy lệnh: 'hf download xai-org/grok-2 --local-dir /local/grok-2'. Quá trình tải xuống sẽ vào khoảng 500GB và chứa 42 tệp. Thử lại nếu xảy ra lỗi trong quá trình tải xuống.
Cài đặt Công cụ Suy luận SGLang: Cài đặt công cụ suy luận SGLang mới nhất (phiên bản >= v0.5.1) từ https://github.com/sgl-project/sglang/
Khởi chạy Máy chủ Suy luận: Chạy lệnh: 'python3 -m sglang.launch_server --model /local/grok-2 --tokenizer-path /local/grok-2/tokenizer.tok.json --tp 8 --quantization fp8 --attention-backend triton'
Kiểm tra Mô hình: Gửi yêu cầu kiểm tra bằng lệnh: 'python3 -m sglang.test.send_one --prompt \"Human: What is your name?<|separator|>\\n\\nAssistant:\"' - Mô hình sẽ phản hồi xác định nó là Grok
Xem xét Điều khoản Giấy phép: Đảm bảo tuân thủ Thỏa thuận Giấy phép Cộng đồng Grok 2 trước khi sử dụng mô hình
Câu hỏi Thường gặp về Grok 2.5 (OSS Ver.)
Grok 2.5 là mô hình tốt nhất của xAI từ năm ngoái đã được phát hành dưới dạng mã nguồn mở. Đây là một mô hình AI quy mô lớn với trọng số xấp xỉ 500 GB.
Bài viết phổ biến

DeepSeek v3.1: Đánh giá toàn diện của AIPURE với các điểm chuẩn & so sánh với GPT-5 và Claude 4.1 năm 2025
Aug 26, 2025

Đánh giá Lmarena Nano Banana 2025: Liệu đây có phải là Vua mới của Trình tạo ảnh AI? (Kiểm nghiệm thực tế & Phản hồi từ người dùng)
Aug 20, 2025

Hướng dẫn sử dụng Nano Banana Lmarena miễn phí (2025): Hướng dẫn tối thượng để tạo ảnh AI nhanh chóng & sáng tạo
Aug 18, 2025

Nano-Banana: Một trình tạo ảnh AI bí ẩn tốt hơn Flux Kontext vào năm 2025
Aug 15, 2025