损失函数binary_crossentropy和categorical_crossentropy在单标签多分类模型中评价效果差异较大的原因

在tensorflow2.0中用cifar10数据集中发现用 binary_crossentropy 和categorical_crossentropy不同的交叉熵损失函数模型在测试集上的效果差异较大，用binary_crossentropy的效果要优于categorical_crossentropy，
在网上查阅资料后发现原因如下，参考来源（https://zhuanlan.zhihu.com/p/48078990）

原文如下
在运行keras的代码时，发现一个有趣的现象，当使用binary_crossentropy和categorical_crossentropy时，其日志中输出的acc有较大差异，后经多方查阅，发现原因是keras对两者使用了不同的metrics计算acc，对于binary_crossentropy使用的是binary_accuracy，对于后者使用的是categorical_accuracy，读者有兴趣可以参考官方源码（https://github.com/keras-team/keras/blob/master/keras/metrics.py）
如果不想使用默认值可以在调用compile手动设置metrics参数：

model.compile(optimizer=optimizers.Adam(lr

损失函数binary_crossentropy和categorical_crossentropy在单标签多分类模型中评价效果差异较大的原因相关推荐

【深度学习】单标签多分类问题之新闻主题分类
# -*- coding: utf-8 -*- """单标签多分类问题之新闻主题分类.ipynbAutomatically generated by Colaborato ...
机器学习之单标签多分类及多标签多分类
单标签二分类算法 Logistic算法单标签多分类算法 Softmax算法 One-Versus-One(ovo):一对一 One-Versus-All / One-Versus-the-Rest( ...
单标签多分类+多标签单分类
1.单标签二分类 label标签的取值只有两种,并且算法中只有一个需要预测的label标签.直白来讲就是每个实例的可能类别只有两种(A or B).此时的分类算法其实是在构建一个分类线将数据划分为两个 ...
单标签多分类及多标签多分类算法
1.单标签二分类算法单标签二分类这种问题是我们最常见的算法问题,主要是指label标签的取值只有两种,并且算法中只有一个需要预测的label标签.直白来讲就是每个实例的可能类别只有两种(A or B ...
python输入数据的维度_keras分类模型中的输入数据与标签的维度实例
在<python深度学习>这本书中. 一.21页mnist十分类导入数据集 from keras.datasets import mnist (train_images, train_l ...
【多标签文本分类】融合CNN-SAM与GAT的多标签文本分类模型
·阅读摘要: 在本文中,作者基于CNN.Attention.GAT提出CS-GAT模型,在一些通用数据集上,表现良好. ·参考文献: [1] 融合CNN-SAM与GAT的多标签文本分类模型 ...
前端开发表单标签完成一个简单登陆的效果 0228
表单标签的功能提交数据给服务器表单的基本结构格式各样的控件 input标签的多样性目标效果表格的结构设置宽高合并单元格继续合并单元格填写内容 . 插入表单控件按钮添加按钮居中用 ...
Python实现BP神经网络ANN单隐层分类模型项目实战
说明:这是一个机器学习实战项目(附带数据+代码+文档+视频讲解),如需数据+代码+文档+视频讲解可以直接到文章最后获取. 1.项目背景 BP(back propagation)神经网络是1986年由R ...
干货：如何利用机器学习实现有噪声标签样本分类模型？
在工业生产活动中,有一类常见机器学习问题,就是如何基于有噪声样本标签训练模型,以进行故障检测和分类. 先解释下什么是有噪声样本标签,它指的是训练模型用的样本标签并非完全准确,部分样本的标签有标错的情况 ...
torchtext使用-- 单标签多分类任务TREC
本篇文章参考: Multi-class Sentiment Analysis 部分细节可能会略作改动,代码注释尽数基于自己的理解.文章目的仅作个人领悟记录,并不完全是tutorial的翻译,可能并不适 ...

损失函数binary_crossentropy和categorical_crossentropy在单标签多分类模型中评价效果差异较大的原因

损失函数binary_crossentropy和categorical_crossentropy在单标签多分类模型中评价效果差异较大的原因相关推荐

最新文章

热门文章