Khái niệm cốt lõi: Nhà cung cấp (Providers)
Nhà cung cấp (Providers) là các cỗ máy AI nền tảng (Mô hình ngôn ngữ lớn) xử lý văn bản của bạn và tạo ra phản hồi. Rephlo là một giao diện phổ quát — bạn có thể hoán đổi những "bộ não" này qua lại tùy theo tác vụ, và một nhà cung cấp duy nhất có thể cung cấp nhiều mô hình (xem Mô hình & Suy luận (Models & Inference)).
Các loại nhà cung cấp
Rephlo hỗ trợ 8 loại nhà cung cấp Bring-Your-Own-Key (BYOK) cùng với Dedicated API do Rephlo quản lý:
Nhà cung cấp đám mây (Cần Internet)
- OpenAI — Các mô hình dòng GPT. Chuẩn mực ngành cho suy luận, lập trình và sáng tạo.
- Anthropic — Các mô hình Claude; nổi tiếng với khả năng viết chất lượng cao, cửa sổ ngữ cảnh lớn, và prompt caching (bật mặc định).
- Groq — Suy luận cực nhanh trên chip LPU tùy chỉnh — phản hồi gần như tức thì.
- Google — Các mô hình Gemini với khả năng đa phương thức mạnh mẽ.
- xAI (Grok) — Các mô hình Grok với Live Search thời gian thực tùy chọn.
- OpenRouter — Một cổng thống nhất tới hơn 100 mô hình từ nhiều nhà cung cấp, với khả năng theo dõi qua Site URL / Site Name.
- OpenAI-Compatible — Kết nối tới bất kỳ dịch vụ nào triển khai đặc tả API của OpenAI (Azure OpenAI, vLLM, LocalAI, LiteLLM, LM Studio, proxy tùy chỉnh). Yêu cầu API Key, Base URL và Model Name.
Nhà cung cấp cục bộ (Riêng tư hoàn toàn)
- Ollama — Chạy các mô hình mã nguồn mở (Llama, Mistral, Gemma, DeepSeek, Qwen) trực tiếp trên máy tính của bạn. Dữ liệu của bạn không bao giờ rời khỏi m áy. Base URL có thể cấu hình (mặc định
http://localhost:11434); một khóa API Ollama tùy chọn sẽ bật tính năng tìm kiếm web.
Azure OpenAI được kết nối thông qua loại OpenAI-Compatible — chọn OpenAI-Compatible và nhập endpoint triển khai Azure của bạn làm Base URL (và tên triển khai của bạn làm Model Name). Đây không phải là một mục riêng trong danh sách thêm nhà cung cấp.
Mô hình trên thiết bị (On-device): Rephlo cũng chạy các mô hình GGUF hoàn toàn trên thiết bị (không cần internet, không cần Ollama) thông qua một engine tích hợp sẵn. Đây là một luồng suy luận liên quan nhưng tách biệt — xem Mô hình trên thiết bị (On-Device Models) và Mô hình & Suy luận (Models & Inference).
Nhà cung cấp được quản lý
- Dedicated API — Tùy chọn đám mây được Rephlo quản lý, sử dụng OAuth 2.0. Cách thiết lập đơn giản nhất cho người dùng không muốn tự quản lý khóa API; mức sử dụng được theo dõi bằng credit. Cấu hình của nó được tự động tạo và ẩn khỏi danh sách nhà cung cấp thông thường.
Muốn một bộ chọn chỉ gồm BYOK/on-device? Bật Hide online models from Rephlo Gateway trong Nhà cung cấp (Providers) để ẩn các mô hình Dedicated (Gateway) khỏi mọi bộ chọn mô hình.
Trên thiết bị (On-Device) so với BYOK
Hai hướng tiếp cận "tự mang mô hình của bạn" này rất dễ gây nhầm lẫn:
- Trên thiết bị (On-Device) — các mô hình mã nguồn mở (GGUF) chạy cục bộ trên máy của bạn thông qua engine tích hợp sẵn. Không cần khóa API, không cần internet, hoàn toàn riêng tư; không có gì rời khỏi máy tính của bạn.
- BYOK (Bring Your Own Key) — bạn cung cấp khóa API của riêng mình cho một nhà cung cấp bên ngoài (một nhà cung cấp đám mây, hoặc Ollama cục bộ). Các yêu cầu được gửi tới nhà cung cấp đó bằng khóa của bạn, và nhà cung cấp sẽ tính phí bạn trực tiếp.
Cả On-Device và BYOK đều là tính năng của gói Pro — để sử dụng, bạn cần một gói Pro (hoặc cao hơn) đang hoạt động, hoặc một giấy phép vĩnh viễn (perpetual license). Với mô hình trên thiết bị, giới hạn này áp dụng cho cả việc tải xuống lẫn chạy chúng; sau khi mở khóa, chúng chạy không tốn credit và hoàn toàn ngoại tuyến. Thiết lập khóa trong Providers.
Dedicated API nền tảng so với Enterprise BYOK
- Dedicated API là dịch vụ suy luận được lưu trữ và quản lý bởi Rephlo: đăng nhập và sử dụng các mô hình tiên tiến nhất (frontier) của Rephlo, tính phí bằng credit, không cần quản lý khóa nào.
- Enterprise BYOK (trên nền tảng) dành cho các tổ chức cấu hình tập trung khóa nhà cung cấp riêng của họ và các mô hình được phép ở cấp tổ chức, để mọi thành viên đều dùng chung mô hình và khóa của tổ chức — nhằm tuân thủ và kiểm soát chi phí.
Tóm lại: Dedicated API đánh đổi khóa API lấy credit và việc không cần thiết lập, trong khi Enterprise BYOK giữ việc quản lý khóa tập trung tại tổ chức. Khóa BYOK cá nhân được cấu hình trong Providers.
Chế độ nhà cung cấp
Mỗi nhà cung cấp hoạt động ở một trong hai chế độ: BYOK (bạn tự cung cấp khóa của nhà cung cấp) hoặc Dedicated (do Rephlo quản lý, có theo dõi credit).