增量PCA#

增量主成分分析(IPCA)通常在数据集过大无法全部加载到内存时,作为主成分分析(PCA)的替代方法使用。IPCA使用与输入数据样本数量无关的内存量,为输入数据构建低秩近似。它仍然依赖于输入数据的特征,但通过改变批量大小可以控制内存使用。

这个例子作为一个视觉检查,展示了IPCA能够找到与PCA相似的数据投影(符号翻转除外),同时每次只处理少量样本。这可以被认为是一个“玩具示例”,因为IPCA是为那些无法全部加载到主内存的大型数据集设计的,需要增量方法。

  • Incremental PCA of iris dataset Mean absolute unsigned error 0.002201
  • PCA of iris dataset
# 作者:scikit-learn 开发者
# SPDX-License-Identifier: BSD-3-Clause

import matplotlib.pyplot as plt
import numpy as np

from sklearn.datasets import load_iris
from sklearn.decomposition import PCA, IncrementalPCA

iris = load_iris()
X = iris.data
y = iris.target

n_components = 2
ipca = IncrementalPCA(n_components=n_components, batch_size=10)
X_ipca = ipca.fit_transform(X)

pca = PCA(n_components=n_components)
X_pca = pca.fit_transform(X)

colors = ["navy", "turquoise", "darkorange"]

for X_transformed, title in [(X_ipca, "Incremental PCA"), (X_pca, "PCA")]:
    plt.figure(figsize=(8, 8))
    for color, i, target_name in zip(colors, [0, 1, 2], iris.target_names):
        plt.scatter(
            X_transformed[y == i, 0],
            X_transformed[y == i, 1],
            color=color,
            lw=2,
            label=target_name,
        )

    if "Incremental" in title:
        err = np.abs(np.abs(X_pca) - np.abs(X_ipca)).mean()
        plt.title(title + " of iris dataset\nMean absolute unsigned error %.6f" % err)
    else:
        plt.title(title + " of iris dataset")
    plt.legend(loc="best", shadow=False, scatterpoints=1)
    plt.axis([-4, 4, -1.5, 1.5])

plt.show()

Total running time of the script: (0 minutes 0.105 seconds)

Related examples

LDA和PCA在鸢尾花数据集上的二维投影比较

LDA和PCA在鸢尾花数据集上的二维投影比较

鸢尾花数据集

鸢尾花数据集

连接多种特征提取方法

连接多种特征提取方法

使用概率PCA和因子分析(FA)进行模型选择

使用概率PCA和因子分析(FA)进行模型选择

Gallery generated by Sphinx-Gallery