github
/
minimind
mirror of https://github.com/jingyaogong/minimind.git
1
0
Fork 0
Code Issues Packages Projects Releases Wiki Activity

update readme's error

pull/825/head
gongjy 2024-08-28 18:05:42 +08:00
parent e978601a8b
commit 4702dd2637
2 changed files with 3 additions and 3 deletions
Show Stats Download Patch File Download Diff File Expand all files Collapse all files

2
README.md
View File

@ -163,7 +163,7 @@ python 2-eval.py
强大的开源模型例如01万物、千问、chatglm、mistral、Llama3等，它们的tokenizer词表长度如下： 强大的开源模型例如01万物、千问、chatglm、mistral、Llama3等，它们的tokenizer词表长度如下：
| Tokenizer 模型 | 词表大小 | 来源 | | Tokenizer 模型 | 词表大小 | 来源 |
|--------------------|---------|------------| |--------------------|---------|------------|
| yi tokenizer | 64,000 | 01万物（中国） | | yi tokenizer | 64,000 | 01万物（中国） |
| qwen2 tokenizer | 151,643 | 阿里云（中国） | | qwen2 tokenizer | 151,643 | 阿里云（中国） |
| glm tokenizer | 151,329 | 智谱AI（中国） | | glm tokenizer | 151,329 | 智谱AI（中国） |

2
README_en.md
View File

@ -192,7 +192,7 @@ git clone https://github.com/jingyaogong/minimind.git
sizes: sizes:
| Tokenizer Model | Vocabulary Size | Source | | Tokenizer Model | Vocabulary Size | Source |
|----------------------|------------------|-----------------------| |----------------------|------------------|-----------------------|
| yi tokenizer | 64,000 | 01-AI (China) | | yi tokenizer | 64,000 | 01-AI (China) |
| qwen2 tokenizer | 151,643 | Alibaba Cloud (China) | | qwen2 tokenizer | 151,643 | Alibaba Cloud (China) |
| glm tokenizer | 151,329 | Zhipu AI (China) | | glm tokenizer | 151,329 | Zhipu AI (China) |