每天五分钟机器学习:通过学习曲线判断模型是过拟合还是欠拟合
创始人
2024-01-17 01:25:38
0

本文重点

本节课程我们学习使用学习曲线来判断某一个学习算法是否处于偏差、方差问题。学习曲线其实就是训练误差和验证误差关于样本m的曲线,我们将通过学习曲线来判断该算法是处于高偏差问题,还是处于高方差问题。

高偏差问题(欠拟合)

 

注意:这个m表示训练集数据样本数,其中训练误差是使用训练集算出来的,而验证集误差是使用验证集算出来的。因为不同的m求出的训练误差不同,因为梯度下降要最小化训练误差,那么此时的参数θ不同,那么验证集误差也不同,所以验证集误差也会随着训练集m而变化

 

如欠拟合的学习曲线所示,当我们的训练数据很小的时候,泛化程度不会很好(验证集误差大),模型不能很好的适应新的样本,因此,此时不会是一个很好的假设。

随着训练集样本容量的增加,验证集误差和训练集误差都会而减少,所以当我们使用数据越多,越能获得更好的泛化表现,因此数据越多,越能拟合出合适的假设。

通过上面的图像,我们可以看出随着训练样本m的增加,我们的训练误差是越来越大的,而我们的交叉验证误差是越来越小的,这是一个趋势。

我们可以看到当我们的训练样本m增多的时候,此时训练误差和交叉验证误差会非

上一篇:一件小事。

下一篇:我会在北师大等你

相关内容

热门资讯

五年级一单元作文大全450字... 五年级一单元作文大全450字 篇一我的暑假生活暑假到了,我有了一个美妙的假期。在这个假期里,我不仅玩...
小学生五年级作文700字(实... 小学生五年级作文700字 篇一我喜欢的动物我喜欢的动物是猫咪。猫咪有着柔软的毛发和灵活的身体,总是给...
去湖北玩作文四年级(通用6篇... 去湖北玩作文四年级 篇一我去湖北玩的经历我上个暑假去了湖北旅游,度过了一个难忘的假期。湖北是一个美丽...
第一次学游泳四年级作文(精选... 第一次学游泳四年级作文 篇一第一篇内容我一直都很害怕水,每次看到水就觉得自己会被淹死。可是,我知道学...
走走停停五年级作文【精简3篇... 走走停停五年级作文 篇一:我的暑假生活暑假已经到来了,我迫不及待地计划着如何度过这个美好的假期。我和...
教室里的掌声作文600字四年... 教室里的掌声作文600字四年级 篇一教室里的掌声今天,当我走进教室的时候,一阵热烈的掌声迎接着我。我...
四年级写景作文【通用6篇】 四年级写景作文 篇一秋天的森林今天我来到了一个美丽的森林,这是我第一次来到这里,我迫不及待地想探索一...
美丽的校园就像我的家四年级作... 篇一:美丽的校园就像我的家在我眼中,学校就像我的第二个家。它不仅给予了我学习的机会和知识的智慧,更重...
优秀文章《童年趣事》【最新5... 优秀文章《童年趣事》 篇一小时候,我和爷爷奶奶住在一个小村庄里。那里的生活简单而宁静,我们的童年充满...
四年级200字校园作文大全【... 四年级200字校园作文大全 篇一我的校园生活我是一名四年级的学生,我喜欢我的校园生活。在校园里,我有...
寒假里的新鲜事四年级作文50... 篇一:寒假里的新鲜事寒假里的新鲜事四年级作文500字 篇一寒假终于来了,我和爸爸妈妈一起去了北京旅游...
描写春天的四年级作文400字... 描写春天的四年级作文400字 篇一春天的颜色春天是一个充满色彩的季节。当冬天的寒冷逐渐消散,春姑娘轻...
登碧云峰四年级作文(优秀3篇... 登碧云峰四年级作文 篇一我的暑假生活暑假来临了,我迫不及待地来到了碧云峰。碧云峰是一个美丽的山脉,被...
我爱我家四年级优秀满分作文(... 我爱我家四年级优秀满分作文 篇一家,是我最温暖的港湾家是一个人最亲近的地方,我也不例外。我爱我家,因...
我也有犯错的时候小学生作文(... 我也有犯错的时候小学生作文 篇一我也有犯错的时候我是一个小学生,虽然我还小,但是我也会犯错。每个人都...
向你介绍我400字作文四年级... 向你介绍我400字作文四年级作文 篇一我叫小明,是一个四年级的学生。今天我要向你介绍一下我自己。首先...
四年级上册第六单元作文记一次... 四年级上册第六单元作文记一次游戏 篇一我最喜欢的游戏是“捉迷藏”。这个游戏非常有趣,不仅能锻炼我们的...
低头族作文四年级【通用6篇】 低头族作文四年级 篇一低头族的危害如今,低头族成为了一个非常流行的词汇。低头族指的是那些长时间低头看...
四年级上册作文新学期新鲜事(... 四年级上册作文新学期新鲜事 篇一新学期开始了,我迫不及待地走进了教室,发现自己的座位旁边多了一个新同...
博饼四年级作文【最新3篇】 博饼四年级作文 篇一我的博饼经历今天是中秋节,我参加了学校举办的博饼活动。这是我第一次参加博饼,我非...