Elysia Tools
导航
AI
按语言体系分析文本，并预估 OpenAI、Codex、Claude 和 DeepSeek 的 token 消耗
详情
预估粘贴文本或上传 TXT/Markdown 文件的 AI token 消耗。
功能说明：
执行
填写表单、运行工具，并在同一页面查看结果。
案例
相关内容
等待运行
工具使用指南
AI Token 预估器是一款专为大语言模型用户设计的文本分析与 Token 计算工具。它能够智能识别中英文、代码、日韩文等多语言混合文本，并基于离线分词器（如 OpenAI o200k_base 和 cl100k_base）以及官方 API 或启发式规则，精准预估 OpenAI、Codex、Claude 和 DeepSeek 的 Token 消耗，帮助您有效控制 API 预算并优化提示词长度。
背景
需要设计一个包含大量英文 API 文档和中文说明的复杂提示词，用于自动化客服系统。
问题
提示词过长可能导致超出模型窗口，且不清楚在 OpenAI 和 Claude 下的 Token 消耗差异。
如何使用
将中英混合提示词粘贴到输入框，选择“全部配置”模型，并保持“纯文本”计数模式。
{
"inputText": "请总结以下 API 设计并列出 3 个风险：\n\nAPI Specification:\nGET /v1/users\nDescription: Retrieve user list...",
"modelProfile": "All Profiles",
"countMode": "raw-text"
}结果
预估器快速输出分析报告，显示该文本在 OpenAI o200k_base 下的精确 Token 数以及 Claude 的估算 Token 数，帮助工程师精准删减了 15% 的冗余英文描述。
背景
需要将一份 5MB 的系统崩溃日志（包含大量代码行、符号和时间戳）输入给 DeepSeek 进行故障分析。
问题
无法确定日志文件是否会超出 DeepSeek 的单次输入限制，且手动计算极不现实。
如何使用
上传 system_error.log 文件，在模型配置中选择“DeepSeek Chat 估算”，点击开始分析。
{
"textFile": "system_error.log",
"modelProfile": "DeepSeek Chat Estimate",
"countMode": "raw-text"
}结果
工具内置了离线分词器，能够精确计算 OpenAI/Codex 的 o200k_base 和 cl100k_base 编码，无需调用外部 API 即可给出 100% 精确的 Token 数量。
在未配置官方 API 密钥或官方接口调用失败时，工具会采用透明的启发式规则进行估算。如果配置了 Claude 的 API 密钥，则会通过官方接口进行精确计算。
支持导入 .txt、.md、.csv、.json 和 .log 等文本文件，单个文件大小限制在 20MB 以内。
纯文本模式直接计算输入文本的 Token；聊天消息模式会模拟大模型对话的特定格式（如系统角色、用户角色等元数据包装）来计算更接近真实 API 调用的 Token 消耗。
对于 OpenAI 的离线计算完全在本地浏览器中完成。只有在您配置了 API 密钥并需要调用 Claude 官方接口时，才会发起安全的网络请求，您的文本隐私得到严格保护。
工具通过启发式规则快速计算出该日志文件的预估 Token 消耗，并识别出文本中包含大量的代码行与符号，帮助开发人员决定分批次上传日志。