如果想用交叉熵函数改写这里的loss，应该怎么写？

Question

上面的写法对吗？
另外，在这里使用平方差和交叉熵的loss，一般最后效果差别大吗？
如果是在多分类softmax里， 使用平方差和交叉熵，效果差别大吗？

Answer 1

正十七 2019-04-09 21:34:05

看了一下官方文档，https://www.tensorflow.org/api_docs/python/tf/nn/sigmoid_cross_entropy_with_logits

你的实现应该是对的，你可以运行一下看看对不对。

根据我的经验，在二分类上，两者效果应该差不多，但在多分类里，一般交叉熵比平方差会好。主要在于交叉熵的log有放大作用，可以区分出要学习的重点。

• 提问者 伊利札洛夫 #1

  非常感谢！