- 无标题文档
查看论文信息

中文题名:

 基于云计算的电子商务智能推荐系统研究     

姓名:

 朱孔真    

学号:

 1049721201762    

保密级别:

 公开    

论文语种:

 chi    

学科代码:

 020206    

学科名称:

 国际贸易学    

学生类型:

 硕士    

学位:

 经济学硕士    

学校:

 武汉理工大学    

获奖论文:

 校优秀硕士学位论文    

院系:

 经济学院    

专业:

 应用经济学    

研究方向:

 电子商务    

第一导师姓名:

 刘平峰    

第一导师院系:

 武汉理工大学    

完成日期:

 2014-12-16    

答辩日期:

 2014-12-18    

中文关键词:

 

电子商务 ; 推荐系统 ; 大数据 ; 云计算

    

中文摘要:

伴随着电子商务的发展,人们的日常生活方式发生了巨大改变。现在我们可以通过电脑或手机等设备在足不出户的情况下购买到自己想要的商品。然而信息时代数据爆炸式增长为人们获取信息和知识带来更多机遇的同时,如何在海量数据中剔除不相干的信息、快捷地获取到有价值的信息成为一项挑战工作。而个性化推荐系统就是在这样的背景下产生的,它可以挖掘出不同用户的不同偏好,从而有针对性地进行个性化推荐。

学术界对现有电子商务个性化推荐技术的研究主要集中在基于内容的、协同过滤的、基于知识的等传统推荐技术以及对这些算法的优化上,但是电子商务已经进入了大数据时代,优化的传统算法尽管在一定程度上可以提升推荐系统的效果,但是已经不能适应大数据环境下满足客户的个性化服务的需求。与此同时,目前很多学者对推荐系统评测指标认识不全面,有些学者及文章只局限于推荐系统的精确性这一个方面,而对多样性、新颖性、覆盖率等指标视而不见,还有些学者及文章在文中只选择对自己算法有利的指标,因此如何客观、有效的评价推荐系统需要一个完整统一的指标体系。

在以上问题的基础上,本文设计了大数据环境下推荐系统的架构、基于云计算的推荐算法和分布式推荐系统综合评测体系,并且实现了基于云计算的电子商务智能推荐系统原型。主要工作如下:

(1)基于云计算的推荐系统框架设计,研究了基于云计算的大数据处理技术、Hadoop平台以及MapReduce工作原理,提出了基于云计算的推荐系统总体框架与系统工作流程。

(2)基于云计算的推荐算法设计,针对传统推荐算法在数据稀疏性及在大数据规模下系统可扩展性的问题,在分析研究Hadoop分布式平台与基于内容过滤、协同过滤、关联规则等相关算法后,提出基于Hadoop平台实现个性化推荐算法的方法。

(3)分布式推荐系统综合评测体系设计,研究了分布式推荐系统评测体系设计的基本原则,并据此建立推荐系统评测指标体系,包括预测准确度、效率性、覆盖率、多样性、新颖性等五个维度,并且提出各指标的评价方法。

(4)基于云计算的电子商务智能推荐原型系统实现,以电子商务网站海量行为数据为实证研究对象,构建基于Hadoop云平台电子商务智能推荐系统原型,并进行推荐系统评价指标实证研究,验证算法和指标的有效性,改进并丰富基于云计算的电子商务智能推荐系统的理论、方法和技术体系。

通过研究基于云计算技术实现的电子商务智能推荐系统,解决了传统单机环境对各种推荐算法支持不足的问题,验证了分布式推荐系统评测指标体系的有效性,对改进电子商务个性化推荐系统的有效性、规模性和实时性,提升个性化精准营销水平具有重要的理论意义和经济价值。

参考文献:

[1] 米可菲, 张勇, 邢春晓等. 面向大数据的开源推荐系统分析[J]. 计算机与数字工程, 2013, 41(10): 1563-1566.

[2] Karthik Srinivasa Gopalan, Senthil Nathan. A cloud based service architecture for personalized media recommendations[C]. 2011 Fifth International Conference on Next Generation Mobile Applications and Services, 2011: 19-24.

[3] 程学旗, 靳小龙, 王元卓等. 大数据系统和分析技术综述[J]. 软件学报, 2014, (9):1889-1908.

[4] 贺瑶, 王文庆, 薛飞. 基于云计算的海量数据挖掘研究[J]. 计算机技术与发展, 2013, (2):69-72.

[5] 覃雄派, 王会举, 杜小勇等. 大数据分析_RDBMS与Map Reduce的竞争与共生[J]. 软件学报, 2012, 23(1): 32-45.

[6] 孟小峰, 慈祥. 大数据管理:概念, 技术与挑战[J]. 计算机研究与发展, 2013, 50(1): 146-169.

[7] 牛新征, 佘堃. 面向大规模数据的快速并行聚类划分算法研究[J]. 计算机科学, 2012, 39(1): 134-137.

[8] 李伟卫, 赵航, 张阳等. 基于Map Reduce的海量数据挖掘技术研究[J].计算机工程与应用 , 2013, 49(20):112-117.

[9] 王慧. 基于Hadoop的并行挖掘算法的研究[D]. 首都师范大学, 2013.

[10] 翟岩龙, 罗壮, 杨凯等. 基于Hadoop的高性能海量数据处理平台研究[J]. 计算机科学, 2013, 40(3): 100-103.

[11] 王国霞, 刘贺平. 个性化推荐系统综述[J]. 计算机工程与应用, 2012, 48(7): 66-76.

[12] 张永攀, 冯锡炜, 关沧等. 电子商务个性化推荐系统的应用[J]. 辽宁石油化工大学学报, 2013, 33(1): 69-73.

[13] 李慧, 胡云, 李存华等. 基于近邻关系的个性化推荐算法研究[J]. 计算机工程与应用, 2013, 48(36): 205-209.

[14] Walter Carrer-Neto, María Luisa Hernández-Alcaraz, Rafael Valencia-García. Social knowledge-based recommender system.Application to the movies domain[J]. Expert Systems with Applications, 2012(39): 10990-11000.

[15] 朱郁筱, 吕琳媛. 推荐系统评价指标综述[J]. 电子科技大学学报, 2012, 41(2): 163-175.

[16] Bracha Shapira Lior Rokach, Shirley Freilikhman. Facebook single and cross domain data for recommendation systems[J]. User Modeling and User-adapted Interaction, 2013(23): 211–247.

[17] 叶红云, 倪志伟, 倪丽萍. 一种检测兴趣漂移的图结构推荐系统[J]. 小型微型计算机系统, 2012, 33(4): 700-706.

[18] Hyunwoo Kim, Hyoung-Joo Kim. A framework for tag-aware recommender systems[J]. Expert Systems with Applications, 2014(41): 4000–4009.

[19] 孟祥武, 胡勋, 王立才等. 移动推荐系统及其应用[J]. Journal of Software, 2013, 24(1):91-108.

[20] 朱郁筱, 吕琳媛. 推荐系统评价指标综述[J]. 电子科技大学学报, 2012, 41(2): 163-175.

[21] Almazro D, Shahatah G, Albdulkarim L, et al. A survey paper on recommender systems[J]. arXiv preprint arXiv:1006.5278, 2010.

[22] Zhou T, Ren J, Medo M, et al. Bipartite network projection and personal recommendation[J]. Physical Review E, 2007, 76(4): 046115.

[23] Zhou T, Jiang L L, Su R Q, et al. Effect of initial configuration on network-based recommendation[J]. EPL (Euro Physics Letters), 2008, 81(5): 58004.

[24] Picault J, Ribière M, Bonnefoy D, et al. How to Get the Recommender Out of the Lab?[M]. Recommender Systems Handbook. Springer US, 2011: 333-365.

[25] Shani G, Gunawardana A. Evaluating recommendation systems[M]// Recommender systems handbook. Springer US, 2011: 257-297.

[26] Zhou T, Su R Q, Liu R R, et al. Accurate and diverse recommendations via eliminating redundant correlations[J]. New Journal of Physics, 2009, 11(12): 123008.

[27] Gunawardana A, Shani G. A survey of accuracy evaluation metrics of recommendation tasks[J]. The Journal of Machine Learning Research, 2009, 10: 2935-2962.

[28] Zhang Z K, Liu C, Zhang Y C, et al. Solving the cold-start problem in recommender systems with social tags[J]. EPL (Europhysics Letters), 2010, 92(2): 28002.

[29] 许海玲, 吴潇, 李晓东等. 互联网推荐系统比较研究[J]. 软件学报, 2009, 20(2): 350-362.

[30] 董坤. 基于协同过滤算法的高校图书馆图书推荐系统研究[J]. 现代图书情报技术, 2012 (11): 44-47.

[31] 陈康. 基于Eclat算法的图书推荐系统仿真[J]. 计算机仿真, 2010 (9): 311-314.

[32] 赵麟. 基于最大频繁模式挖掘算法进行书目推荐系统的设计与实现[J]. 现代图书情报技术, 2010, 5: 23-28.

[33] 武建伟, 俞晓红, 陈文清. 基于密度的动态协同过滤图书推荐算法[J]. 计算机应用研究, 2010, 27(8):3013-3016.

[34] 张瑶, 陈维斌, 傅顺开. 基于大数据的高校图书馆推荐系统仿真研究[J]. 计算机工程与设计, 2013, 34(7): 2533-2541.

[35] 彭菲菲, 钱旭. 基于用户关注度的个性化新闻推荐系统[J]. 计算机应用研究, 2012, 29(3): 1005-1007.

[36] 向志明. 面向海量用户行为数据的并行个性化推荐算法的研究与实现[D]. 北京交通大学. 2012.

[37] 时睿. 基于数据挖掘的商品推荐系统研究和实现[D]. 上海交通大学. 2013.

[38] 郭骅旻. 支持个性化推荐的情报挖掘系统研究与设计[D]. 南京理工大学. 2013.

[39] 郭韦昱. 基于用户行为分析的个性化推荐系统设计与实现[D]. 南京大学. 2013.

[40] 张鹏. 基于云计算的在线视频推荐系统设计与实现[D]. 大连理工大学, 2013.

[41] 赵彦荣, 王伟平, 孟丹等. 基于Hadoop的高效连接查询处理算法CHMJ[J]. 软件学报, 2012, 23(8):2032-2041. DOI:10.3724/SP.J.1001.2012.04124.

[42] 陈康, 郑纬民.云计算:系统实例与研究现状[J]. 软件学报, 2009, 20(5):1337-1348.

[43] Saeid Abrishami.Deadline-constrained workflow scheduling algorithms for infrastructure as a service clouds[J].Future Generation Computer Systems,2013(29):158-169.

[44] 郑湃,崔立真,王海洋.云计算环境下面向数据密集型应用的数据布局策略与方法[J].计算机学报,2010,33(8):1472-1480.

[45] Dong Yuan,Yun Yang.On-demand minimum cost benchmarking for intermediate dataset storage in scientific cloud workflow systems[J].Journal of Parallel and Distributed Computing,2011,71(2):316-332.

[46] Dong Yuan,Yun Yang,Xiao Liu.A data placement strategy in scientific cloud workflows[J].Future Generation Computer Systems,2010(26):1200-1214.

[47] Michael Mattess,Christian Vecchiola.Managing peak loads by leasing cloud infrastructure services from a spot market[C].12th IEEE International Conference on High Performance Computing and Communications,2010:180-188.

[48] Rodrigo N Calheiros,Adel Nadjaran Toosi.A coordinator for scaling elastic applications across multiple clouds[J].Future Generation Computer Systems,2012,28(8):1350-1362.

[49] Xiaoyu Yang,Bassem Nasser.A business-oriented cloud federation model for real-time applications[J].Future Generation Computer Systems,2012(28):1158-1167.

[50] 饶君,吴斌,东昱晓.MapReduce环境下的并行复杂网络链路预测[J].软件学报,2012,33(12):3175-3186.

[51] Kataria M, Mittal M P. Big Data and Hadoop with Components like Flume, Pig, Hive and Jaql[J]. 2014. International Journal of Computer Science and Mobile Computing.2014. 3(7):759-765.

[52] Zhu N, Liu X, Liu J, et al. Towards a cost-efficient MapReduce: Mitigating power peaks for Hadoop clusters[J]. Tsinghua Science and Technology, 2014, 19(1): 24-32.

[53] 孙莉, 何刚, 李继云. 基于 Hadoop 平台的事实并行处理算法[J]. 计算机工程, 2014, 40(3): 59-62, 81.

[54] 吕雪骥. 基于云计算平台的智能推荐系统研究[D]. 安徽大学, 2012.

[55] 李俭霞. 电子商务智能推荐技术及应用研究[D]. 重庆大学, 2009.

[56] 许海玲, 吴潇, 李晓东等. 互联网推荐系统比较研究[J]. 软件学报, 2009, (2):350-362.

[57] 刘平峰,杨柳,朱孔真.一种基于内容过滤的服务资源推荐新技术[J].武汉理工大学学报(信息与管理工程版),2014(5):668-672.

[58] 聂规划, 游怀杰, 孟洁. 基于关联关系的数字家庭服务资源推荐体系[J]. 武汉理工大学学报(信息与管理工程版), 2013,35 (3):444-447.

[59] 委鑫. 基于FP树的关联规则挖掘算法研究[D]. 西安电子科技大学, 2010.

[60] 徐小伟. 基于信任的协同过滤推荐算法在电子商务推荐系统的应用研究[D]. 东华大学, 2013.

[61] 李鹏飞, 吴为民. 基于混合模型推荐算法的优化[J]. 计算机科学, 2014, (2).

中图分类号:

 TP311.13    

馆藏号:

 TP311.13/1762/2014    

备注:

 403-西院分馆博硕论文库;203-余家头分馆博硕论文库    

无标题文档

   建议浏览器: 谷歌 火狐 360请用极速模式,双核浏览器请用极速模式