PCA核心揭秘:用台球摆放和不同角度的灯光投影理解 方差和特征值
PCA 的核心操作:投影 + 找散得最开的方向目录PCA 的核心操作:**投影 + 找散得最开的方向**用"影子"比喻二、"散得最开" = "方差最大"三、具体数字走一遍尝试"投影方向 A" = 水平方向 `[1, 0]`尝试"投影方向 B" = 45° 斜方向 `[0.707, 0.707]`尝试"投影方向 C" = -45° 斜方向 `[-0.707, 0.707]`结论四、"特征值" 和 "方差" 是同一件事五、PCA 真的"遍历所有方向"吗?六、扩展到多个方向:找到互相垂直的一组"最优方向"七、几个常问的困惑Q1:为什么用"方差"来衡量重要性?Q2:为什么要"垂直"?Q3:投影方向必须是单位向量吗?八、把您问的两件事精确回答问题 1:**"PCA 是不是在某个方向上投影,看规律?"**问题 2:**"方差/特征值算的是什么?"**九、一图终极总结用"影子"比喻想象一堆数据点是桌上的一堆小球(2D 例子)。现在从不同角度打光,让小球在墙上留下影子:方向 A(水平打光) 方向 B(斜 45° 打光) 桌面上的球(俯视): ● ● ● ● ● ● ● 墙上的影子: 墙上的影子: ●● ●●● ← 影子挤成一堆 ● ● ● ● ● ● ● ← 影子散得最开 方差小(信息少) 方差大(信息多) ← PC1!PCA 干的事:遍历所有打光方向,找出影子散得最开的那个方向。