**Simon Willison 发布 ttok 1.0,默认切换至 GPT-5/6 分词器**

_ttok 1.0_

> Simon Willison 发布了 ttok 1.0 版本,将默认分词器从 GPT-4 更新为 GPT-5/GPT-6。尽管 OpenAI 尚未官方确认 GPT-6 沿用 GPT-5 的分词器,但社区实验数据显示两者在测试语料上的 token 计数完全一致,证实了分词器的兼容性。

**来源信息**
- **来源**:Simon Willison 博客
- **分类**:ai-products
- **发布时间**:2026-10-09 08:34(北京时间)
- **原文**:[打开原文](https://simonwillison.net/2026/Oct/9/ttok)