Chi phí AI không chỉ là giá mỗi token. Một quy trình còn tiêu tốn thời gian chờ, số lần gọi mô hình, lượng ngữ cảnh gửi lặp lại và công sức sửa đầu ra. Thông báo GPT‑5.6 của OpenAI đáng chú ý vì đặt trọng tâm vào hiệu năng trên mỗi đồng chi phí, thay vì chỉ nói về một điểm benchmark mới.
Nhận định chính: hãy đo chi phí cho một kết quả đạt chuẩn, không đo riêng giá một triệu token.
Ba mức năng lực, ba vai trò
Theo OpenAI, dòng GPT‑5.6 được phân thành Luna, Terra và Sol. Luna hướng tới tốc độ và chi phí thấp; Terra cân bằng cho công việc thường ngày; Sol dành cho tác vụ khó hơn. Hãng công bố giá Luna giảm 80%, Terra giảm 20%, còn Sol có Fast mode nhanh hơn nhưng chi phí cao hơn.
Đây là số liệu do nhà cung cấp công bố. Nó không đảm bảo cùng hiệu quả với dữ liệu tiếng Việt hoặc quy trình riêng. Trước khi đổi hệ thống, cần chạy một bộ bài thử nội bộ có đáp án và tiêu chí chấm rõ ràng.
Không dùng mô hình mạnh nhất cho mọi bước
Một workflow tốt thường có phần khó và phần lặp lại. Mô hình mạnh có thể lập kế hoạch, xử lý ngoại lệ, đưa ra cấu trúc. Mô hình tiết kiệm hơn có thể phân loại, trích xuất, chuẩn hóa hoặc thực hiện thay đổi đã được mô tả rõ.
Ví dụ trong xử lý phản hồi khách hàng: Sol xác định nhóm vấn đề và quy tắc phân loại; Luna xử lý hàng nghìn phản hồi; một lớp kiểm tra tự động đánh dấu trường hợp bất thường để con người xem lại. Cách phân tầng này chỉ hiệu quả khi mỗi bước có ngưỡng chất lượng và cơ chế dừng.
Hệ thống quan trọng không kém mô hình
Một mô hình rẻ chạy mười vòng có thể tốn hơn mô hình mạnh hoàn thành trong hai vòng. Vì vậy cần đo cả số vòng agent, tỷ lệ gọi công cụ thất bại, lượng context bị lặp và tỷ lệ đầu ra cần sửa. Tối ưu prompt là chưa đủ; phải tối ưu toàn bộ đường đi từ yêu cầu đến kết quả.
Cách thử nghiệm thực tế
- Chọn một quy trình có đầu vào, đầu ra và tiêu chuẩn đạt đo được.
- Phân loại từng bước theo độ khó, quy mô, độ gấp và hậu quả khi sai.
- Chạy cùng dữ liệu qua nhiều model tier; đo chính xác, độ trễ, tỷ lệ sửa và tổng chi phí.
- Dùng Fast mode chỉ khi tốc độ tạo ra giá trị đủ bù chi phí tăng.
- Giữ phê duyệt của con người trước hành động tài chính, pháp lý hoặc thay đổi hệ thống.
Nguồn tham khảo
OpenAI — Advancing the price-performance frontier with GPT‑5.6 ↗Các thông số sản phẩm là tuyên bố của OpenAI. Phần ứng dụng và khuyến nghị là nhận định biên tập.