获取令牌数量#

langchain_community.callbacks.infino_callback.get_num_tokens(string: str, openai_model_name: str) int[source]#

使用 tiktoken 包计算 OpenAI 的 num tokens。

Official documentation: openai/openai-cookbook

/examples/如何使用tiktoken计算令牌.ipynb

Parameters:
  • 字符串 (str)

  • openai_model_name (str)

Return type:

整数