66B (66 tỷ tham số) là loại mô hình ngôn ngữ lớn, được huấn luyện trên lượng dữ liệu văn bản khổng lồ để có thể hiểu và sinh văn bản một cách tự nhiên.
66B thường dựa trên kiến trúc transformer, với nhiều lớp tự attention và feed-forward, cho phép xử lý ngữ cảnh dài và nắm bắt ngữ nghĩa phức tạp.
Những ứng dụng bao gồm trợ lý ảo, tổng hợp nội dung, hỗ trợ lập trình và phân tích ngôn ngữ. Tuy nhiên, kích thước lớn có thể đi kèm chi phí tính toán, rủi ro về dữ liệu và vấn đề đạo đức sử dụng.
