过拟合问题:加入的参数个数越多,模型拟合的效果越好,但这却是以提高模型复杂度为代价的。因此,模型选择要在模型复杂度与模型对数据的解释能力之间寻求最佳平衡。
赤池信息准则(Akaike Information Criterion,AIC)
日本统计学家赤池弘次在1974年提出
贝叶斯信息准则(Bayesian Information Criterion,BIC)
由Schwartz在1978年根据贝叶斯理论提出
样本个数用T表示
模型中参数的个数n:反映模型的复杂程度;
模型的极大似然函数值:反映模型对于数据解释(拟合)程度。
AIC和BIC是选小原则,我们要选择使得AIC或BIC最小的模型。
(BIC对于模型的复杂程度的惩罚系数更大,因此BIC往往比AIC选择的模型更简洁)

Loading...
公告
🎉大学生科技协会(2024)网站试运行🎉
-- 感谢您的支持 --- 科协获:
小平科技创新团队 (青少年科技创新领域国家级最高荣誉,全校唯一)
全国高校百强社团 中国大学生ican物联网创新创业实践教育基地 校十佳社团 “一院一品”智能空间 科技竞赛优秀组织单位
阅读科协简介了解更多吧!