FastTokenizer Python 库使用教程1. 快速安装环境依赖Windows 64位系统Linux x64系统MacOS 10.14+系统(m1芯片的MacOS,需要使用x86_64版本的Anaconda作为python环境方可安装使用)Python 3.6 ~ 3.10安装pip install --upgrade fast_tokenizer