langchain.evaluation.schema.StringEvaluator¶
- class langchain.evaluation.schema.StringEvaluator[source]¶
根据输入和/或参考标签对预测结果进行评分、标记或以其他方式进行评估。
Attributes
evaluation_name评估的名称。
requires_input评估器是否需要输入字符串。
requires_reference评估器是否需要参考标签。
Methods
__init__()aevaluate_strings(*, prediction[, ...])异步评估Chain或LLM输出，基于可选的输入和标签。
evaluate_strings(*, prediction[, reference, ...])评估链式或LLM输出，基于可选输入和标签。
- __init__()¶
- async aevaluate_strings(*, prediction: str, reference: Optional[str] = None, input: Optional[str] = None, **kwargs: Any) dict[source]¶
异步评估Chain或LLM输出，基于可选的输入和标签。
- 参数:
prediction (str): 要评估的LLM或chain预测。 reference (Optional[str], optional): 要评估的参考标签。 input (Optional[str], optional): 评估过程中要考虑的输入。 **kwargs: 其他关键字参数，包括回调函数、标签等。
- 返回:
dict: 包含得分或值的评估结果。
- Parameters
prediction (str) –
reference (Optional[str]) –
input (Optional[str]) –
kwargs (Any) –
- Return type
dict
- evaluate_strings(*, prediction: str, reference: Optional[str] = None, input: Optional[str] = None, **kwargs: Any) dict[source]¶
评估链式或LLM输出，基于可选输入和标签。
- 参数:
prediction (str): 要评估的LLM或链预测。 reference (Optional[str], optional): 要评估的参考标签。 input (Optional[str], optional): 在评估过程中要考虑的输入。 **kwargs: 其他关键字参数，包括回调函数、标签等。
- 返回:
dict: 包含得分或值的评估结果。
- Parameters
prediction (str) –
reference (Optional[str]) –
input (Optional[str]) –
kwargs (Any) –
- Return type
dict