PCA主成分分析

PCA主成分分析

• 返回顶层目录

• 返回上层目录

【直观详解】什么是PCA、SVD

主成分分析（Principal Component Analysis）：一种统计方法，它对多变量表示数据点集合寻找尽可能少的正交矢量表征数据信息特征。

PCA既是一种压缩数据的方式，也是一种学习数据表示的无监督学习方法。《深度学习》5.8.1 P92

有两种解释

1，深度学习 p30 2.12节

2，深度学习 p92 5.8.1节

Dimensionality Reduction——PCA原理篇

https://zhuanlan.zhihu.com/p/28317712

Dimensionality Reduction——PCA实现篇

https://zhuanlan.zhihu.com/p/28327257

PCA主成分分析学习总结

https://zhuanlan.zhihu.com/p/32412043

理解主成分分析 (PCA)

hinton对pca的理解

理解主成分分析 (PCA)

PCA的损失函数

通过指定如下损失函数就可以得到PCA的第一个主向量

$$J(w)=\mathbb{E}_{X\sim \hat{p}_{data}}\left \|x-r(x;w) \right \|^2_2$$

模型定义为重构函数

$$r(x)=w^Txw$$

，并且w有范数为1的限制。

《深度学习》5.10 p96