1993年、こういったシステムは時間方向に展開されたRNN中に1000を超える後続層を必要とする「非常に深い学習」課題を解決した。 二次(secondorder)RNNは、標準的な重み w i j {\displaystyle w{}_{ij}} の代わりにより高次の重み w i j k {\displaystyle
Neurathian bootstrap Reflective equilibrium Reflective practice Second-ordercybernetics ^ Argyris, Chris (May 1991). “Teaching smart people how to learn”