Meta đã công bố Llama 4, bộ sưu tập mô hình trí tuệ nhân tạo AI mới nhất hiện đang hỗ trợ trợ lý Meta AI trên web và trong WhatsApp, Messenger và Instagram.
Hai mô hình mới, cũng có thể tải xuống từ Meta hoặc Hugging Face, là Llama 4 Scout, một mô hình nhỏ có khả năng "phù hợp với một GPU Nvidia H100 duy nhất" và Llama 4 Maverick, giống với GPT-4o và Gemini 2.0 Flash hơn.
Meta cho biết họ vẫn đang trong quá trình đào tạo Llama 4 Behemoth, mà CEO của Meta là Mark Zuckerberg cho biết là "mô hình cơ sở có hiệu suất cao nhất thế giới".
Theo Meta, Llama 4 Scout có cửa sổ ngữ cảnh 10 triệu mã thông báo, bộ nhớ làm việc của mô hình AI, và đánh bại các mô hình Gemma 3 và Gemini 2.0 Flash-Lite của Google , cũng như Mistral 3.1 mã nguồn mở, "trên nhiều tiêu chuẩn được báo cáo rộng rãi", trong khi vẫn "phù hợp với một GPU Nvidia H100 duy nhất".
Meta đưa ra những tuyên bố tương tự về hiệu suất của mô hình Maverick lớn hơn so với GPT-4o của OpenAI và Gemini 2.0 Flash của Google, và cho biết kết quả của nó tương đương với DeepSeek-V3 trong các tác vụ mã hóa và suy luận sử dụng "ít hơn một nửa các tham số hoạt động".
Trong khi đó, Llama 4 Behemoth có 288 tỷ tham số hoạt động với tổng cộng 2 nghìn tỷ tham số. Mặc dù chưa được phát hành, Meta cho biết Behemoth có thể vượt trội hơn các đối thủ cạnh tranh (trong trường hợp này là GPT-4.5 và Claude Sonnet 3.7) "trên một số chuẩn STEM".
Đối với Llama 4, Meta cho biết họ đã chuyển sang kiến trúc “hỗn hợp chuyên gia” (MoE), một phương pháp tiết kiệm tài nguyên bằng cách chỉ sử dụng các phần của mô hình cần thiết cho một nhiệm vụ nhất định. Công ty có kế hoạch thảo luận về các kế hoạch trong tương lai cho các mô hình và sản phẩm AI tại hội nghị LlamaCon, diễn ra vào này 29/4.
Giống như các mô hình trước đây, Meta gọi bộ sưu tập Llama 4 là “mã nguồn mở”, mặc dù Llama đã bị chỉ trích vì các hạn chế về giấy phép. Ví dụ, giấy phép Llama 4 yêu cầu các tổ chức thương mại có hơn 700 triệu người dùng hoạt động hàng tháng phải yêu cầu Meta cấp phép trước khi sử dụng các mô hình của mình, mà Sáng kiến Nguồn mở đã viết vào năm 2023 đưa nó “ra khỏi danh mục 'Nguồn mở'”.
