基于Hadoop構架的推薦系統平臺

劉卓　崔忠偉

摘要：高速發展的信息技術和迅速增加的數據，給人們的生活帶來困惑，推薦系統（Recommender System）可以從海量的用戶瀏覽信息中，根據用戶的特點，選擇出特定的內容推薦給用戶，推薦系統給用戶提供了極大的便捷，但是，目前的推薦系統在空間存儲的可擴展性與算法的效率存在缺陷，基于Hadoop構架的推薦系統解決了這一缺陷，它經濟適用強，效率高，并且極大的提高了基于分布式計算Hadoop構架能夠解決推薦系統的可擴展性問題，同時，對于大數據技術在實際中的應用具有實際意義。

關鍵詞：Hadoop構架；大數據技術；推薦系統平臺

中圖分類號：TP311 文獻標識碼：A 文章編號：1009-3044（2015）12-0012-03

The Recommendation System Based on Hadoop Structure

LIU Zhuo 1，2， CUI Zhong-wei1，2

（1.School of Mathematics and Computer Science，Guiyang Normal College，Guiyang 550018， China 2.Industrial Internet of Things Engineering Research Center of the Higher Education Institutions of Guizhou Province， Guiyang 550018， China）

Abstract： the rapid development of information technology and the rapid increase of data give the people life confusion， according to the user characteristic the recommendation system can select the specific content from the mass of user browsing information ，which provides the user with great convenience， but， at present， the recommendation system has defects in the space storage scalability and the algorithm deficiency， the recommendation system based on Hadoop structure solves the defects， and it is affordable， high efficiency， and greatly improves the scalability problem based on the Hadoop distributed framework ，also which has an important significance for the application of big data technology in practice.

Key words： Hadoop framework； the Big Data； the Recommendation System

1概述

隨著電子商務的快速發展，網上商品的種類和數量日益繁雜，顧客面對選擇的時候，往往不知道從何抉擇，為了解決這一個困惑，推薦系統平臺應運而生， 目前，推薦系統平臺引領了各個搜索型網站，交友軟件的好友推薦、美團網網站的熱門推薦、購物網站的商品推薦、視頻網站的電影推薦、資源網站的優質資源推薦等，這些推薦系統提高各個網站的點擊率和銷售額，影響著人們的學習、生活、工作。

Hadoop，是大數據技術的核心技術，即分布式系統基礎構架，主要有HDFS和MapReduce兩部分組成，它能夠實現對大量數據的存儲和計算，能夠將多臺普通或者低性能的服務器組合成分布式的運算集聚。如果我們把Hadoop的這一特性應用到推薦系統，勢必能夠提高推薦系統的推薦范圍和推薦的精準度[1]，，克服了目前的推薦系統在空間存儲的可擴展性與算法的效率存在缺陷。……