MLP、LR和SVM的区别？

Question

老师您好，我想问一下多层感知机、逻辑回归和SVM在实现上的区别在哪里？
逻辑回归是使用sigmiod进行激活的，如果把它的sigmiod换成ReLU，损失函数和优化方法都一样的情况下，是不是就是单层感知机呢？

SVM和单层感知机的区别，又在哪里呢？

Answer 1

Markov_Xi 2022-08-30 12:52:50

同学你好，逻辑回归输出的是概率， 而单层感知机寻找的是概率分布，而SVM的训练目标和前两者都是不一样的，且SVM不能像感知机那样在线训练（就是来一组数据，调整一次参数）。详细的说明，我这边可以提供几篇资料：

1.  https://stats.stackexchange.com/questions/61189/difference-between-a-svm-and-a-perceptron

2. https://www.researchgate.net/figure/comparing-the-performance-of-the-MLP-with-the-SVM-on-gene-expression-data-in_tbl1_259319882
   

• 提问者 Howiedu #1

  非常感谢！