Bản cài đặt GPT tối giản của Andrej Karpathy để huấn luyện/fine-tune model ngôn ngữ từ đầu — học là chính.
nanoGPT là mã nguồn cực gọn (vài trăm dòng) để huấn luyện và tinh chỉnh mô hình GPT từ con số 0. Nó đủ nhanh để tái hiện GPT-2 và đủ đơn giản để đọc hiểu toàn bộ. Đây là tài liệu học kinh điển về cách một LLM thực sự được huấn luyện.
Tải & chạy các mô hình LLM ngay trên máy bạn — trái tim cấp trí tuệ cho cả nhà máy.
Các bước cơ bản để bắt đầu.
Clone repo, cài `pip install torch numpy ...`Chuẩn bị dữ liệu bằng script `prepare.py`Chạy `python train.py config/...`Tải & chạy LLM (Llama, Mistral, Qwen…) cục bộ chỉ bằng một lệnh; có API tương thích OpenAI.
Chạy LLM cực nhẹ trên CPU/GPU thường, kể cả máy yếu; nền tảng cho hầu hết công cụ chạy AI cục bộ.