因子分析(いんしぶんせき、英: factor analysis)は、分析対象を多数の項目で測定・評価したデータ(=観測データ)の連成を分析し、データの裏にある本質的な原因(=因子)を統計的に推定する多変量解析の手法のひとつ。
心理学におけるパーソナリティの特性論的研究など、心理尺度の研究手法として使用される。
モデル式の形状などから主成分分析と混同されることもあるが、主成分分析は観測データから合成スコアを構築することが目的であるのに対し、因子分析は観測データが合成量であると仮定し、個々の構成要素を得ようとすることが目的であり、両者は因果関係を異にする。
適用の例として「器用さ」の個人差の検討が考えられる。A, B, Cの3人はそれぞれ「ジグソーパズル」「彫刻」「時計の分解」をある速度で器用にこなすことができるとしたときにA, B, Cの器用さをどのように評価すればよいかを考える場合、3人が3つのテストにかかった時間に対して因子分析を適用することで、3つの課題に共通する潜在的な「器用さ」の導出を試みることができる。
因子分析では、因子数を事前に与える必要があるなど、数学的見地から理論的に疑義をはさむ意見もある一方、主成分分析が測定誤差を考慮要素に含めずに合成変量としている点を批判するなど、両者に関してともすれば宗教論争的な議論が絶えない。
いずれにせよ、データ解析における基本的心構えとして、算出された数値はあくまで計算によるものであり、それらの妥当性は研究者の判断に委ねられることは当然である、と理解しておく必要がある。
定義
今、個の確率変数の組、が得られたとする。また、各変数の母平均はそれぞれであるとする。
これらの変数を、p個の共通因子で
と説明する線形モデルが因子分析法である。
ここで、は因子負荷量と呼ばれ,通常の多変量回帰分析における偏回帰係数に相当する。また、は変数の独自因子と呼ばれ、通常の線形回帰モデルにおける観測誤差とは別の仮定がおかれる[注 1]。
先のモデルをベクトルと行列を用いて表すと[注 2]、
となる。以降、各種の仮定やモデルの性質はこちらを基本として説明する。
共通因子と独自因子には
- と は統計的に独立
- (は対角行列; 異なる変数に対する独自因子は無相関)
であるという仮定がおかれる。
この仮定を用いて,観測された変数の分散共分散行列を考えると
となり、観測変数の分散共分散行列がパラメータ行列で構造化されていることがわかる。
ここでは分散共分散行列が構造化されると述べたが、通常のパラメータ推定手順においては観測変数 を前もって標準化しておくことで、分散共分散行列ではなく相関係数行列に上記の構造化を考える。
性質
回転の不定性
因子分析モデルには回転の不定性と呼ばれる性質がある。これは、
のように、適当な行列を用いて変換した因子負荷行列と共通因子もまた因子分析モデルを(統計的な適合度を変えることなく)満たすという、解の不定性のことを指す。
そのほか、SAS、SPSS等多くのソフトで因子分析を扱うことができる。
独自因子を、特殊因子と観測誤差の和として説明することもできるが、通常のパラメータ推定仮定において特殊因子と観測誤差の分離は難しいため、ここでは独自因子とだけ述べる。
因子分析法には変量モデル、母数モデル、記述モデルの3種類が存在するが、ここでは変量モデルのみ述べる。