Cách sử dụng
- Dán văn bản hoặc tải mẫu rồi chọn encoding tokenizer.
- Chạy công cụ rồi kiểm tra kết quả và thông báo trạng thái.
- Sao chép giá trị cần dùng hoặc tải kết quả xuống.
Đếm token
Đếm token cục bộ bằng o200k_base hoặc cl100k_base và xem ID token.
Xử lý diễn ra trong trình duyệt. Dữ liệu và tệp không được tải lên DevToolsy.
Cách hoạt động
Đếm văn bản thuần theo encoding đã chọn, không gồm cấu trúc chat, định nghĩa tool hoặc phí API.
Xin chào thế giới! Hãy tạo điều hữu ích.{
"encoding": "o200k_base",
"count": 13,
"ids": [
161644,
549,
35134,
46773,
69217,
0,
487,
78745,
53694,
47450,
110277,
144518,
13
]
}Đếm token cục bộ bằng o200k_base hoặc cl100k_base và xem ID token.
Kết quả có thể mong đợi
Chọn token để xem ID. Dấu chấm biểu thị khoảng trắng. Một phần ký tự UTF-8 có thể hiển thị là � khi xem riêng.
Đầu ra
Sao chép giá trị cần dùng hoặc tải kết quả xuống.
Đầu vào UTF-8 tối đa 256 KiB. Xem trước 1.000 token đầu; bản sao và JSON chứa toàn bộ ID.
Câu hỏi thường gặp
Số này có bằng lượng tính phí API không?
Đếm văn bản thuần theo encoding đã chọn, không gồm cấu trúc chat, định nghĩa tool hoặc phí API.
Tại sao token có thể hiển thị �?
Chọn token để xem ID. Dấu chấm biểu thị khoảng trắng. Một phần ký tự UTF-8 có thể hiển thị là � khi xem riêng.
Đầu vào có được tải lên không?
Xử lý diễn ra trong trình duyệt. Dữ liệu và tệp không được tải lên DevToolsy.
Giới hạn xử lý là gì?
Đầu vào UTF-8 tối đa 256 KiB. Xem trước 1.000 token đầu; bản sao và JSON chứa toàn bộ ID.
Làm sao giữ lại kết quả?
Sao chép giá trị cần dùng hoặc tải kết quả xuống.