您的位置:山东大学 -> 科技期刊社 -> 《山东大学学报(工学版)》

山东大学学报(工学版)

• 机器学习与数据挖掘 • 上一篇    下一篇

SVD系列算法在评分预测中的过拟合现象

陈大伟,闫昭*,刘昊岩   

  1. 北京航空航天大学计算机学院, 北京 100191
  • 收稿日期:2013-06-28 出版日期:2014-06-20 发布日期:2013-06-28
  • 通讯作者: 闫昭(1988- ),男,北京人,博士研究生,主要研究方向为数据挖掘与推荐系统. E-mail: yanzhaobuaa@163.com
  • 作者简介:陈大伟(1990- ),男,山东青岛人,硕士研究生,主要研究方向为图像检索与数据挖掘. E-mail: talentsharp@126.com

Overfitting phenomenon  of  the series of single value decomposition algorithms in rating prediction

CHEN Dawei, YAN Zhao*, LIU Haoyan   

  1. School of Computer Science & Engineering, Beihang University, Beijing 100191, China
  • Received:2013-06-28 Online:2014-06-20 Published:2013-06-28

摘要: 主要对协同过滤推荐算法进行改进,以使训练评分模型的过程能够预防过拟合现象的发生。对SVD系列算法在评分预测问题中产生的过拟合现象进行相关实验与研究,提出通过调整算法参数与迭代次数来避免过拟合现象发生的方法。实验结果表明,该方法能够以较高的时间效率找到评分预测结果较好的结果,并可有效地避免过拟合现象的发生。

关键词: 奇异值分解, 电子商务, 推荐系统, 过拟合, 协同过滤, 集成学习

Abstract: The collaborative filtering algorithm was improved to prevent overfitting in training rating prediction model. Experiments were put forth for  overfitting phenomenon  of the series of single value decomposition algorithms in rating prediction, and a method of adjusting parameters and iteration count to avoid overfitting phenomenon was proposed. The experimental results showed that this method could  find better rating prediction and avoid overfitting at the same time.

Key words: collaborative filtering;recommendation system, overfitting, ensemble learning, single value decomposition, electronic commerce

[1] 段圣宇,吴伊宁,赛高乐. 一种面向矩阵分解模型的推荐系统训练加速方法[J]. 山东大学学报 (工学版), 2025, 55(1): 24-29.
[2] 李港龙,林培光,李金玉,王倩. 基于智能合约的电商社区式问答服务平台设计[J]. 山东大学学报 (工学版), 2024, 54(6): 57-71.
[3] 白琳,俱通,王浩,雷明珠,潘晓英. 面向不平衡数据的提升均衡集成学习算法[J]. 山东大学学报 (工学版), 2024, 54(4): 59-66.
[4] 常新功,苏敏惠,周志刚. 基于进化集成的图神经网络解释方法[J]. 山东大学学报 (工学版), 2024, 54(4): 1-12.
[5] 李璐,张志军,范钰敏,王星,袁卫华. 面向冷启动用户的元学习与图转移学习序列推荐[J]. 山东大学学报 (工学版), 2024, 54(2): 69-79.
[6] 郑顺,王绍卿,刘玉芳,李可可,孙福振. 基于动态掩码和多对对比学习的序列推荐模型[J]. 山东大学学报 (工学版), 2023, 53(6): 47-55.
[7] 闵海根,雷小平,李杰,童星,吴霞,方煜坤. 基于双层混合集成的自动驾驶汽车故障检测[J]. 山东大学学报 (工学版), 2022, 52(6): 30-40.
[8] 王冰,马文明,武聪,郝昱猛. 融合信任相似度的偏置概率矩阵分解算法[J]. 山东大学学报 (工学版), 2022, 52(4): 110-117.
[9] 张大鹏,刘雅军,张伟,沈芬,杨建盛. 基于异质集成学习的虚假评论检测[J]. 山东大学学报 (工学版), 2020, 50(2): 1-9.
[10] 张胜男,王雷,常春红,郝本利. 基于三维剪切波变换和BM4D的图像去噪方法[J]. 山东大学学报 (工学版), 2020, 50(2): 83-90.
[11] 陈德蕾, 王成, 陈建伟, 吴以茵. 基于门控循环单元与主动学习的协同过滤推荐算法[J]. 山东大学学报 (工学版), 2020, 50(1): 21-27.
[12] 张宗堂,王森,孙世林. 一种针对不平衡数据分类的集成学习算法[J]. 山东大学学报 (工学版), 2019, 49(4): 8-13.
[13] 胡云,张舒,李慧,佘侃侃,施珺. 基于信任网络重构的推荐算法[J]. 山东大学学报 (工学版), 2019, 49(2): 42-46.
[14] 金翠,王洪元,陈首兵. 基于随机擦除行人对齐网络的行人重识别方法[J]. 山东大学学报 (工学版), 2018, 48(6): 67-73.
[15] 沈冬冬,周风余,栗梦媛,王淑倩,郭仁和. 基于集成深度神经网络的室内无线定位[J]. 山东大学学报 (工学版), 2018, 48(5): 95-102.
Viewed
Full text


Abstract

Cited

  Shared   
  Discussed   
[1] 王素玉,艾兴,赵军,李作丽,刘增文 . 高速立铣3Cr2Mo模具钢切削力建模及预测[J]. 山东大学学报(工学版), 2006, 36(1): 1 -5 .
[2] 张永花,王安玲,刘福平 . 低频非均匀电磁波在导电界面的反射相角[J]. 山东大学学报(工学版), 2006, 36(2): 22 -25 .
[3] 李 侃 . 嵌入式相贯线焊接控制系统开发与实现[J]. 山东大学学报(工学版), 2008, 38(4): 37 -41 .
[4] 孔祥臻,刘延俊,王勇,赵秀华 . 气动比例阀的死区补偿与仿真[J]. 山东大学学报(工学版), 2006, 36(1): 99 -102 .
[5] 来翔 . 用胞映射方法讨论一类MKdV方程[J]. 山东大学学报(工学版), 2006, 36(1): 87 -92 .
[6] 余嘉元1 , 田金亭1 , 朱强忠2 . 计算智能在心理学中的应用[J]. 山东大学学报(工学版), 2009, 39(1): 1 -5 .
[7] 陈瑞,李红伟,田靖. 磁极数对径向磁轴承承载力的影响[J]. 山东大学学报(工学版), 2018, 48(2): 81 -85 .
[8] 李可,刘常春,李同磊 . 一种改进的最大互信息医学图像配准算法[J]. 山东大学学报(工学版), 2006, 36(2): 107 -110 .
[9] 季涛,高旭,孙同景,薛永端,徐丙垠 . 铁路10 kV自闭/贯通线路故障行波特征分析[J]. 山东大学学报(工学版), 2006, 36(2): 111 -116 .
[10] 浦剑1 ,张军平1 ,黄华2 . 超分辨率算法研究综述[J]. 山东大学学报(工学版), 2009, 39(1): 27 -32 .