2025年03月01日

3

阅读

AI/大数据

Tokenization：大模型的碎碎念大模型不认识字，它只认识数字。把文字变成数字的过程，叫做 Tokenization。听起来简单，坑却多得离谱。

已经到底啦~