单隐藏层在表达能力上不输深层网络，但深层结构可以用更少的参数表达同样的函数族，从而影响可训练性。