第2章 使用编码工具

2.1 编码工具简介

HuggingFace提供了一套统一的编码API,由每个模型各自提交实现。由于统一了API,所以调用者能快速地使用不同模型的编码工具。

在学习HuggingFace的编码工具之前,先看一个示例的编码过程,以理解编码工具的工作过程。