DummyTokenizer#

class langchain_mistralai.embeddings.DummyTokenizer[source]#

当无法访问分词器(例如,通过Huggingface)时使用的虚拟分词器

方法

encode_batch(texts)

encode_batch(texts: List[str]) List[List[str]][source]#
Parameters:

文本 (列表[字符串])

Return type:

列表[列表[str]]