burnex

关于机器学习中的偏差和方差

  •  
  •   burnex · Sep 18, 2018 · 2909 views
    This topic created in 2820 days ago, the information mentioned may be changed or developed.

    偏差和方差具体怎么计算一直搞得不是很清楚,最近查看资料按自己的理解画了一个流程图,请大家帮忙看下我理解的对不对,有什么错漏之处,谢谢

    偏差和方差

    大图请点击链接: https://i.loli.net/2018/09/17/5b9f4f455c1e1.png

    3 replies    2018-09-30 15:05:01 +08:00
    zynlp
        1
    zynlp  
       Sep 18, 2018 via iPhone
    看样子楼主说的偏差像是绝对损失函数?
    miniliuke
        2
    miniliuke  
       Sep 18, 2018 via Android
    方差和期望是针对多样本的,对于单个样本没有意义......如果楼主说的是样本集,你这样算偏差也是没有意义的;还有求均值就是求均值,和期望没有关系
    swordspoet
        3
    swordspoet  
       Sep 30, 2018
    赞!仔细看了看图,图中的偏差和方差都是针对于单个样本的,最后还需要将所有样本的偏差和方差求和汇总吧?

    说一说我对方差和偏差的理解:

    方差和偏差分别评价了两个不同因素(数据、模型)在机器学习中的表现,也可以这样来理解:方差代表了数据扰动所造成的影响,增大样本容量通常可以减轻数据扰动带来的影响;偏差则刻画了算法或模型的拟合能力,它与数据本身关系不太大,通过特征工程、调节参数、选择模型等手段可以解决偏差问题。随着训练程度的增大,学习器拟合性能越来越强,偏差会越来越小,而数据的任何扰动则会使已经完善的学习器产生较大方差。

    总之,方差关乎数据,偏差关乎模型。

    下面这张图讲得很清楚:

    ![如何解释方差与偏差的区别? \| Thinking Realm]( )
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   1504 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 33ms · UTC 16:31 · PVG 00:31 · LAX 09:31 · JFK 12:31
    ♥ Do have faith in what you're doing.