其他分享
首页 > 其他分享> > 深度学习 损失函数综述

深度学习 损失函数综述

作者:互联网

语义分割损失函数

在文章开始之前先贴出参考:A survey of loss functions for semantic segmentation,代码地址,语义分割资源综述。我主要是参考这两个方面,然后其他更多资料也可以自行Google一下。本文章主要是以A survey of loss functions for semantic segmentation为主展开,并且尽可能地配上代码。

在这里插入图片描述

基于分布损失函数(Distribution-base loss)

Binary Cross-Entropy

公式:

在这里插入图片描述

该损失主要是针对二分类的损失,当背景数量>>目标像素数量,模型会严重偏向背景

Weighted Cross-Entropy

为解决分类类别不均衡问题,提出了Weighted Cross-Entropy。公式:

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-ynowgq5g-1631970391001)(https://www.zhihu.com/equation?tex=%5Ctext+%7Bpos_weight%7D+%3D+%5Cfrac%7B%5Ctext+%7Bnum_neg%7D%7D%7B%5Ctext+%7Bnum_pos%7D%7D+%5C%5C+%5Ctext+%7Bloss%7D+%3D+-+%5Ctext+%7Bpos_weight%7D+%5Ctimes+y_%7Btrue%7D+log+%28y_%7Bpred%7D%29+-+%281-y_%7Btrue%7D%29+log+%281-y_%7Bpred%7D%29%5C%5C)]

Balanced Cross-Entropy

这个损失函数的公司类似于MAE。与Weighted Cross-Entropy不同的是,Balanced Cross-Entropy对负样本也进行加权。

公式:
[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-6WWKEzA5-1631970391007)(src/Balanced-CE-loss.png)]

Focal Loss

Distance map derived loss penatly term

在这里插入图片描述

基于区域损失函数(Region-based

Dice Loss

Sensitivity-Specificity Loss

Tversky Loss

论文地址:https://arxiv.org/pdf/1706.05721.pdf

在这里插入图片描述

Focal Tversky Loss

在这里插入图片描述

Log-Cosh Dice Loss

在这里插入图片描述

基于边界的损失函数(Boundary-based)

Hausdorff Distance Loss

在这里插入图片描述

Shape aware Loss

在这里插入图片描述

复合的损失函数(Compounded Loss)

Combo Loss

在这里插入图片描述

Exponential Logarithmic Loss

在这里插入图片描述

总结

在这里插入图片描述

参考

  1. 一文看尽15种语义分割损失函数(含代码解析)

标签:Loss,函数,综述,loss,Cross,损失,Entropy,深度
来源: https://blog.csdn.net/u012655441/article/details/120373886