-
题名基于Spark的并行ALS协同过滤算法研究
被引量：2
- 1
-
-
作者
侯敬儒
吴晟
李英娜
-
机构
昆明理工大学信息工程与自动化学院
-
出处
《计算机与数字工程》
2017年第11期2197-2201,共5页
-
基金
国家自然科学基金项目(编号:51467007)资助
-
文摘
ALS(最小二乘法)协同过滤推荐算法是通过矩阵分解进行推荐,它通过综合大量的用户评分数据进行计算,并存储计算过程中产生的大量特征矩阵。Hadoop的HA(高可用性)用来解决HDFS分布式文件系统的Name Node单点故障问题。Spark是一种基于内存的新型分布式大数据计算框架,具有优异的计算性能。文章基于QJM(Quorum Journal Manag-er)构建了HA下的Hadoop大数据平台,并在Spark计算框架基础上研究使用ALS协同过滤算法,实现基于ALS协同过滤算法在Spark上的并行化运行;通过和基于Hadoop的Map Reduce思想的ALS协同过滤算法在Netflix数据集上的比对实验表明,基于Spark平台的ALS协同过滤算法的并行化计算效率有明显提升,并且更适合处理海量数据。
-
关键词
ALS
协同过滤
矩阵分解
highavailable
SPARK
-
Keywords
ALS,collaborative filtering,Matrix decomposition,High Available,Spark
-
分类号
TP301
[自动化与计算机技术—计算机系统结构]
-
-
题名RHEL集群技术研究与实践
- 2
-
-
作者
翁国梁
李明志
-
机构
广东省佛山市顺德区中等专业学校
-
出处
《电子制作》
2015年第8Z期33-,共1页
-
文摘
通过对服务器集群系统的集群、负载均衡、虚拟化等技术的整合,可以实现三层构架的WWW服务器集群,以较低性能的PC机及PC服务器来实现高性能昂贵的商业硬件服务器、高端存储解决方案所实现的效果,从而更有效利用前期投资的硬件资源投入,客服信息系统的充分投入。
-
关键词
虚拟化
VMWARE
LINUX集群
HighAvailability
-
分类号
TP368.5
[自动化与计算机技术—计算机系统结构]
-
-
题名高可用性技术及在移动通信系统中的应用
- 3
-
-
作者
周光
-
机构
武汉邮电科学研究院北方烽火武汉研发中心
-
出处
《移动通信》
2004年第S2期168-171,共4页
-
文摘
本文首先简要介绍了高可用性系统的基本目标,据此讨论了高可用性系统中几个关键的问题。并在此基础上说明了高可用性系统在移动通信系统中的应用以及移动通信系统中高可用性的实现技术。
-
关键词
高可用性(HighAvailability)
移动通信
-
分类号
TN929.5
[电子电信—通信与信息系统]
-
