mlflow.statsmodels

The mlflow.statsmodels 模块提供用于记录和加载 statsmodels 模型的 API。 该模块以以下 flavors 导出 statsmodels 模型：

statsmodels (native) format

这是可以加载回 statsmodels 的主要 flavor，内部依赖 pickle 来序列化模型。

mlflow.pyfunc

用于通用的基于 pyfunc 的部署工具和批量推理。

class mlflow.statsmodels.AutologHelpers[source]

基类： object

should_autolog = True
mlflow.statsmodels.autolog(log_models=True, log_datasets=True, disable=False, exclusive=False, disable_for_unsupported_versions=False, silent=False, registered_model_name=None, extra_tags=None)[source]

注意

已知 Autologging 与以下软件包版本兼容：0.14.1 <= statsmodels <= 0.14.5。使用超出此范围的包版本时，Autologging 可能无法成功。

启用（或禁用）并配置从 statsmodels 到 MLflow 的自动记录。 记录以下内容：

  • 由任何 statsmodels.base.model.Model 子类的 fit 方法返回的允许列表指标，包括：aic, bic, centered_tss, condition_number, df_model, df_resid, ess, f_pvalue, fvalue, llf, mse_model, mse_resid, mse_total, rsquared, rsquared_adj, scale, ssr, uncentered_tss

  • 训练好的模型。

  • 一个显示模型摘要的 html 工件。

Parameters

  • log_models – 如果 True，训练好的模型将作为 MLflow 模型工件被记录。 如果 False，训练好的模型不会被记录。 输入示例和模型签名（它们是 MLflow 模型的属性）在 log_models 为 False 时也会被省略。

  • log_datasets – 如果 True，则将数据集信息记录到 MLflow Tracking。 如果 False，则不记录数据集信息。

  • disable – 如果 True，则禁用 statsmodels 的 autologging 集成。 如果 False，则启用 statsmodels 的 autologging 集成。

  • exclusive – 如果 True，自动记录的内容不会记录到用户创建的 fluent 运行。 如果 False，自动记录的内容会记录到活动的 fluent 运行，该运行可能是用户创建的。

  • disable_for_unsupported_versions – 如果 True，则为那些尚未针对此版本的 MLflow client 测试过或与之不兼容的 statsmodels 版本禁用 autologging。

  • silent – 如果 True，在 statsmodels autologging 期间抑制来自 MLflow 的所有事件日志和警告。如果 False，在 statsmodels autologging 期间显示所有事件和警告。

  • registered_model_name – 如果提供，每次训练模型时，会将模型注册为具有此名称的注册模型的新版本。如果该注册模型尚不存在，则会创建它。

  • extra_tags – 一个字典，用于在 autologging 创建的每个托管运行上设置额外标签。

mlflow.statsmodels.get_default_conda_env()[source]
Returns

默认的 Conda 环境，用于由调用 save_model() 和 log_model() 生成的 MLflow 模型。

mlflow.statsmodels.get_default_pip_requirements()[source]
Returns

该列表列出了由此 flavor 生成的 MLflow Models 的默认 pip 依赖项。 对 save_model() 和 log_model() 的调用会生成一个 pip 环境，该环境至少包含这些依赖项。

mlflow.statsmodels.load_model(model_uri, dst_path=None)[source]

从本地文件或运行中加载一个 statsmodels 模型。

Parameters

  • model_uri –

    MLflow 模型的 URI 格式的位置。例如：

    • /Users/me/path/to/local/model

    • relative/path/to/local/model

    • s3://my_bucket/path/to/model

    • runs:/<mlflow_run_id>/run-relative/path/to/model

    有关受支持的 URI 方案的更多信息，请参见 Referencing Artifacts。

  • dst_path – 要将模型工件下载到的本地文件系统路径。该目录必须已存在。如果未指定，将创建一个本地输出路径。

Returns

一个 statsmodels 模型 (一个 statsmodels.base.model.Results 的实例).

mlflow.statsmodels.log_model(statsmodels_model, artifact_path: str | None = None, conda_env=None, code_paths=None, registered_model_name=None, remove_data: bool = False, signature: mlflow.models.signature.ModelSignature = None, input_example: Union[pandas.core.frame.DataFrame, numpy.ndarray, dict, list, csr_matrix, csc_matrix, str, bytes, tuple] = None, await_registration_for=300, pip_requirements=None, extra_pip_requirements=None, metadata=None, name: str | None = None, params: dict[str, typing.Any] | None = None, tags: dict[str, typing.Any] | None = None, model_type: str | None = None, step: int = 0, model_id: str | None = None, **kwargs)[source]

将 statsmodels 模型记录为当前运行的 MLflow 工件。

Parameters

  • statsmodels_model – statsmodels model (是 statsmodels.base.model.Results 的一个实例) 要保存。

  • artifact_path – 已弃用。请改用 name。

  • conda_env –

    要么是 Conda 环境的字典表示，要么是指向 conda environment yaml 文件的路径。如果提供，该项描述模型应在其上运行的环境。至少，它应指定 get_default_conda_env() 中包含的依赖项。如果 None，则会向模型添加一个 conda 环境，并通过 mlflow.models.infer_pip_requirements() 推断 pip 依赖项。如果依赖推断失败，则回退使用 get_default_pip_requirements。来自 conda_env 的 pip 依赖项会被写入 pip requirements.txt 文件，完整的 conda 环境会被写入 conda.yaml。 下面是一个 conda 环境字典表示的 示例：

    {
    "name": "mlflow-env",
    "channels": ["conda-forge"],
    "dependencies": [
        "python=3.8.15",
        {
            "pip": [
                "statsmodels==x.y.z"
            ],
        },
    ],
}

  • code_paths –

    本地文件系统中指向 Python 文件依赖（或包含文件依赖的目录）路径的列表。这些文件在模型加载时会被预先添加到系统路径中。如果为某个模型声明了依赖文件且多个文件之间存在导入依赖关系，那么这些文件应从一个共同的根路径声明相对导入，以避免在加载模型时发生导入错误。

    有关 code_paths 功能、推荐的使用模式和限制的详细说明，请参阅 code_paths usage guide。

  • registered_model_name – 如果提供，则在 registered_model_name 下创建一个模型版本，如果没有具有给定名称的已注册模型，还会创建一个已注册模型。

  • remove_data – bool。 如果为 False（默认），则该实例在序列化时不会被更改。 如果为 True，则所有长度为 nobs 的数组在序列化之前被设为 None。 参见 remove_data 方法。 在某些情况下，并非所有数组都会被设为 None。

  • signature –

    一个 ModelSignature 类的实例，用于描述模型的输入和输出。如果未指定但提供了 input_example，则会根据提供的输入示例和模型自动推断签名。要在提供输入示例时禁用自动签名推断，请将 signature 设置为 False。要手动推断模型签名，请在具有有效模型输入，例如省略了目标列的训练数据集，以及有效模型输出，例如在训练数据集上生成的模型预测的数据集上调用 infer_signature()，例如：

    from mlflow.models import infer_signature

train = df.drop_column("target_label")
predictions = ...  # 计算模型预测
signature = infer_signature(train, predictions)

  • input_example – 一个或多个有效模型输入实例。输入示例用于提示应向模型提供何种数据。它将被转换为一个 Pandas DataFrame，然后使用 Pandas 的 split-oriented 格式序列化为 json，或者转换为一个 numpy array，其中示例将通过将其转换为列表的方式序列化为 json。字节使用 base64 编码。当 signature 参数为 None 时，输入示例用于推断模型签名。

  • await_registration_for – 等待模型版本完成创建并处于 READY 状态的秒数。默认情况下，函数会等待五分钟。指定 0 或 None 以跳过等待。

  • pip_requirements – 要么是 pip 依赖字符串的可迭代对象 (例如 ["statsmodels", "-r requirements.txt", "-c constraints.txt"]) 或者是本地文件系统上 pip requirements 文件的路径字符串（例如 "requirements.txt"）。如果提供，该字段描述了运行此模型所需的环境。如果 None，默认的依赖列表将由 mlflow.models.infer_pip_requirements() 从当前软件环境推断。如果依赖推断失败，则回退使用 get_default_pip_requirements。依赖和约束会分别被自动解析并写入 requirements.txt 和 constraints.txt 文件，并作为模型的一部分存储。依赖也会被写入模型的 conda 环境（conda.yaml）文件的 pip 部分。

  • extra_pip_requirements –

    要么是一个 pip 需求字符串的可迭代对象（例如 ["pandas", "-r requirements.txt", "-c constraints.txt"]），要么是本地文件系统上 pip requirements 文件的字符串路径（例如 "requirements.txt"）。如果提供，该参数描述了附加的 pip 依赖，这些依赖会被追加到基于用户当前软件环境自动生成的默认 pip 依赖集合中。requirements 和 constraints 会被自动解析并分别写入 requirements.txt 和 constraints.txt 文件，并作为模型的一部分存储。依赖项也会被写入模型的 conda 环境（conda.yaml）文件的 pip 部分。

    警告

    以下参数不能同时指定：

    • conda_env

    • pip_requirements

    • extra_pip_requirements

    This example 演示了如何使用 pip_requirements 和 extra_pip_requirements 指定 pip 依赖。

  • metadata – 传递给模型并存储在 MLmodel 文件中的自定义元数据字典。

  • name – 模型名称。

  • params – 一个用于与模型一同记录的参数字典。

  • tags – 一个要与模型一起记录的标签字典。

  • model_type – 模型的类型。

  • step – 在该步记录模型输出和指标

  • model_id – 模型的 ID。

  • kwargs – 传递给 mlflow.models.Model.log 的额外 kwargs。

Returns

一个 ModelInfo 实例，包含已记录模型的元数据。

mlflow.statsmodels.save_model(statsmodels_model, path, conda_env=None, code_paths=None, mlflow_model=None, remove_data: bool = False, signature: mlflow.models.signature.ModelSignature = None, input_example: Union[pandas.core.frame.DataFrame, numpy.ndarray, dict, list, csr_matrix, csc_matrix, str, bytes, tuple] = None, pip_requirements=None, extra_pip_requirements=None, metadata=None)[source]

将 statsmodels 模型保存到本地文件系统上的一个路径。

Parameters

  • statsmodels_model – 要保存的 statsmodels 模型（一个 statsmodels.base.model.Results 的实例）。

  • path – 模型要保存的本地路径。

  • conda_env –

    可以是 Conda 环境的字典表示，也可以是 conda 环境 yaml 文件的路径。如果提供，这将描述运行该模型所需的环境。至少应当指定 get_default_conda_env() 中包含的依赖项。如果 None，则将一个包含由 mlflow.models.infer_pip_requirements() 推断出的 pip 依赖项的 conda 环境添加到模型中。如果依赖项推断失败，则回退使用 get_default_pip_requirements。来自 conda_env 的 pip 依赖项会被写入 pip requirements.txt 文件，完整的 conda 环境会被写入 conda.yaml。以下是一个 示例 的 conda 环境的字典表示：

    {
    "name": "mlflow-env",
    "channels": ["conda-forge"],
    "dependencies": [
        "python=3.8.15",
        {
            "pip": [
                "statsmodels==x.y.z"
            ],
        },
    ],
}

  • code_paths –

    本地文件系统中指向 Python 文件依赖（或包含文件依赖的目录）路径的列表。这些文件在模型加载时会被预先添加到系统路径中。如果为某个模型声明了依赖文件且多个文件之间存在导入依赖关系，那么这些文件应从一个共同的根路径声明相对导入，以避免在加载模型时发生导入错误。

    有关 code_paths 功能、推荐的使用模式和限制的详细说明，请参阅 code_paths usage guide。

  • mlflow_model – mlflow.models.Model 此 flavor 正在被添加到。

  • remove_data – bool。若为 False（默认），则实例在序列化（pickled）时不作修改。若为 True，则在序列化前，所有长度为 nobs 的数组都会被设置为 None。参见 remove_data 方法。在某些情况下，并非所有数组都会被设置为 None。

  • signature –

    一个 ModelSignature 类的实例，用于描述模型的输入和输出。如果未指定但提供了 input_example，则会根据提供的输入示例和模型自动推断签名。要在提供输入示例时禁用自动签名推断，请将 signature 设置为 False。要手动推断模型签名，请在具有有效模型输入，例如省略了目标列的训练数据集，以及有效模型输出，例如在训练数据集上生成的模型预测的数据集上调用 infer_signature()，例如：

    from mlflow.models import infer_signature

train = df.drop_column("target_label")
predictions = ...  # 计算模型预测
signature = infer_signature(train, predictions)

  • input_example – 一个或多个有效模型输入实例。输入示例用于提示应向模型提供何种数据。它将被转换为一个 Pandas DataFrame，然后使用 Pandas 的 split-oriented 格式序列化为 json，或者转换为一个 numpy array，其中示例将通过将其转换为列表的方式序列化为 json。字节使用 base64 编码。当 signature 参数为 None 时，输入示例用于推断模型签名。

  • pip_requirements – 要么是一个可迭代的 pip 依赖字符串 (例如 ["statsmodels", "-r requirements.txt", "-c constraints.txt"]) 要么是指向本地文件系统中 pip requirements 文件的字符串路径（例如 "requirements.txt"）。如果提供，则描述了运行此模型所需的环境。如果 None，则从当前软件环境通过 mlflow.models.infer_pip_requirements() 推断出默认的依赖列表。如果依赖推断失败，则回退使用 get_default_pip_requirements。依赖和约束会分别被自动解析并写入到 requirements.txt 和 constraints.txt 文件中，并作为模型的一部分进行存储。这些依赖还会被写入模型 conda 环境（conda.yaml）文件的 pip 部分。

  • extra_pip_requirements –

    要么是一个 pip 需求字符串的可迭代对象（例如 ["pandas", "-r requirements.txt", "-c constraints.txt"]），要么是本地文件系统上 pip requirements 文件的字符串路径（例如 "requirements.txt"）。如果提供，该参数描述了附加的 pip 依赖，这些依赖会被追加到基于用户当前软件环境自动生成的默认 pip 依赖集合中。requirements 和 constraints 会被自动解析并分别写入 requirements.txt 和 constraints.txt 文件，并作为模型的一部分存储。依赖项也会被写入模型的 conda 环境（conda.yaml）文件的 pip 部分。

    警告

    以下参数不能同时指定：

    • conda_env

    • pip_requirements

    • extra_pip_requirements

    This example 演示了如何使用 pip_requirements 和 extra_pip_requirements 指定 pip 依赖。

  • metadata – 传递给模型并存储在 MLmodel 文件中的自定义元数据字典。