0

0

Python中如何处理高维数据—PCA降维实战案例

雪夜

雪夜

发布时间:2025-07-13 14:00:03

|

287人浏览过

|

来源于php中文网

原创

pca(主成分分析)是一种通过线性投影降低数据维度的方法,能保留最大方差信息以减少冗余和计算复杂度。1. 其核心思想是提取正交的主成分来捕捉数据主要变化方向;2. 适用于高维场景如图像、文本处理;3. 实战步骤包括:导入数据、标准化、应用pca降维、可视化结果;4. 选择主成分数量可通过解释方差比或累计曲线判断;5. 注意事项有:需标准化、不适用于非线性结构与分类特征选择、可能损失有用信号。

Python中如何处理高维数据—PCA降维实战案例

在Python中处理高维数据时,PCA(主成分分析)是一种非常实用的降维方法。它能帮助我们减少特征数量,同时保留尽可能多的信息。下面通过一个实战案例,带你了解如何用PCA进行降维。

Python中如何处理高维数据—PCA降维实战案例

什么是PCA?为什么适合用来处理高维数据?

PCA 的核心思想是将原始特征空间中的信息,投影到一个更低维度的空间中,从而提取出最重要的几个“主成分”。这些主成分之间相互正交,能最大程度地保留原始数据的方差信息。

高维数据的问题在于计算复杂度高、容易过拟合,而且很多特征之间可能存在冗余。PCA 就能有效解决这些问题,尤其适用于图像、文本等特征维度动辄成百上千的场景。

立即学习Python免费学习笔记(深入)”;

Python中如何处理高维数据—PCA降维实战案例

实战步骤:使用 sklearn 实现 PCA

我们以经典的鸢尾花(Iris)数据集为例,虽然它的维度并不算高(4个特征),但作为入门练习非常合适。

第一步:导入必要的库和数据

from sklearn.datasets import load_iris
from sklearn.decomposition import PCA
import matplotlib.pyplot as plt

# 加载数据
iris = load_iris()
X = iris.data
y = iris.target

第二步:标准化数据

PCA 对数据尺度敏感,所以需要先做标准化:

Python中如何处理高维数据—PCA降维实战案例
from sklearn.preprocessing import StandardScaler

scaler = StandardScaler()
X_scaled = scaler.fit_transform(X)

第三步:应用 PCA 进行降维

这里我们尝试降到2维,方便可视化:

Red Panda AI
Red Panda AI

AI文本生成图像

下载
pca = PCA(n_components=2)
X_pca = pca.fit_transform(X_scaled)

第四步:可视化结果

plt.figure(figsize=(8, 6))
for target in [0, 1, 2]:
    plt.scatter(X_pca[y == target, 0], X_pca[y == target, 1], label=iris.target_names[target])
plt.xlabel('PC1')
plt.ylabel('PC2')
plt.legend()
plt.title('PCA of Iris Dataset')
plt.show()

这样我们就完成了整个流程,可以看到不同类别的点被较好地区分开。


如何选择主成分数量?

这是使用 PCA 时最常遇到的问题之一。你可以通过查看解释方差比来决定保留多少主成分:

pca = PCA()
pca.fit(X_scaled)
explained_variance = pca.explained_variance_ratio_
print(explained_variance)

输出类似:

[0.729, 0.228, 0.036, 0.007]

这说明前两个主成分已经解释了大约 95.7% 的信息,因此可以放心地只保留前两个成分。

也可以画出累计解释方差曲线来找拐点:

import numpy as np

cumulative_variance = np.cumsum(explained_variance)
plt.plot(cumulative_variance)
plt.xlabel('Number of components')
plt.ylabel('Cumulative explained variance')
plt.grid()
plt.show()

使用 PCA 时需要注意的几点

  • 不要跳过标准化:特征量纲差异大会严重影响 PCA 结果。
  • PCA 是线性方法:对于非线性结构的数据(比如环形分布),考虑使用 t-SNE 或 UMAP。
  • 降维后模型性能不一定提升:有时候去掉的“噪声”也可能是有用信号的一部分,建议结合交叉验证判断是否使用 PCA。
  • PCA 不适合用于分类任务的特征选择:因为它不考虑标签,只关注数据本身的结构。

基本上就这些。PCA 是一个简单但很有效的工具,特别是在你面对上百甚至上千维数据的时候。掌握了基本操作之后,就可以根据实际需求灵活调整参数和流程了。

相关专题

更多
python开发工具
python开发工具

php中文网为大家提供各种python开发工具,好的开发工具,可帮助开发者攻克编程学习中的基础障碍,理解每一行源代码在程序执行时在计算机中的过程。php中文网还为大家带来python相关课程以及相关文章等内容,供大家免费下载使用。

715

2023.06.15

python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

625

2023.07.20

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

739

2023.07.25

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

617

2023.07.31

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

1235

2023.08.03

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

547

2023.08.04

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

575

2023.08.04

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

698

2023.08.11

php源码安装教程大全
php源码安装教程大全

本专题整合了php源码安装教程,阅读专题下面的文章了解更多详细内容。

2

2025.12.31

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL 教程
PostgreSQL 教程

共48课时 | 6.3万人学习

Django 教程
Django 教程

共28课时 | 2.6万人学习

Excel 教程
Excel 教程

共162课时 | 10.1万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2025 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号