感知机原理手推

感知机是最简单的分类模型，但它的分类思想是可以进行多种扩展延伸的。 希望本文的推导能说清楚来龙去脉。

从是否存在间隔，可以分为基本感知机和间隔感知机。由代价函数的选择，可以有多种不同的优化方式。可选择的代价函数有：合页代价函数、softmax代价函数、max平方代价函数。

其中有关代价函数的前置知识，可以参考文章：代价函数详解