对于单个样例 ，其代价函数为：
给定一个包含m个样例的数据集，我们可以定义整体代价函数为：
以上公式中的第一项 是一个均方差项。第二项是一个规则化项（也叫权重衰减项），其目的是减小权重的幅度，防止过度拟合。
反向传播算法，它是计算偏导数的一种有效方法。
版权声明：本文为博主原创文章，未经博主允许不得转载。
UFLDL教程（一）--稀疏自编码器
原文：http://blog.csdn.net/lwnylslwnyls/article/details/47833541
