Principal component analysis (PCA) is a mathematical algorithm that reduces the dimensionality of the data while retaining most of the variation in the data set 1. It accomplishes this reduction ...
AI 的“大脑”究竟长什么样? 近期,来自美国麻省理工学院的研究团队通过稀疏自编码器(SAE,Sparse Autoencoder)在大语言模型的激活空间中发现了大量可解释的向量点,这些向量点代表了模型所掌握的各种概念。