sentence_transformers

类

sentence_transformers.SentenceTransformersTokenTextSplitter([...])

使用句子模型分词器将文本分割为标记。