Softmax回归(Softmax Regression)又被称作多项逻辑回归(multinomial
logistic regression),它是逻辑回归在处理多类别任务上的推广。
在逻辑回归中, 我们有m个被标注的样本:
,其中 。因为类标是二元
的,所以我们有 。我们的假设(hypothesis)有如下形式:
NO.1
预备知识
1 Softmax回归
代价函数(cost function)如下:
在Softmax回归中,类标是大于2的,因此在我们的训练集
中, 。给定一个测试输入x,我们的假设应该输出一个K
维的向量,向量内每个元素的值表示x属于当前类别的概率。具体地,假设
形式如下:
评论0