基于Spark的個性化推薦系統(tǒng)設(shè)計與實現(xiàn).pdf_第1頁
已閱讀1頁,還剩73頁未讀, 繼續(xù)免費閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)

文檔簡介

1、隨著互聯(lián)網(wǎng)技術(shù)的高速發(fā)展,網(wǎng)絡(luò)上的資源逐漸由匱乏狀態(tài)轉(zhuǎn)變?yōu)楝F(xiàn)在的爆發(fā)式增長狀態(tài)。在信息爆炸的時代,利用推薦系統(tǒng)處理過載信息,可以使用戶更方便的找到自己所需的內(nèi)容,電影推薦系統(tǒng)就是要在大量用戶觀影行為和電影數(shù)據(jù)上進行分析與計算,得到推薦結(jié)果并傳達給用戶。
  為了能夠更快的處理大量信息,Hadoop應(yīng)運而生,解決了大數(shù)據(jù)的可靠存儲及處理問題。但是,隨著大數(shù)據(jù)處理技術(shù)的普及,人們發(fā)現(xiàn)MapRecue也存在一些局限性,使用起來也較為困難

2、。其問題有抽象層次較低,使用難以上手,只提供兩種操作Map及Reduce表達力欠缺,中間結(jié)果也放在HDFS文件系統(tǒng)中,延時較高,對于迭代計算性能比較差。因此,技術(shù)發(fā)展的趨勢將會是Hadoop MapReduce被新一代大數(shù)據(jù)處理平臺所替代,而Spark平臺目前得到廣泛的認可。
  本文的主要研究的內(nèi)容是利用分布式Spark平臺計算優(yōu)勢,幫助用戶從龐大的影視信息中找出他們感興趣的電影,并向用戶推薦,避免讓用戶陷入信息過多的困擾。本文

3、研究的重點主要有以下幾個方面:
  1、設(shè)計一套基于分布式Spark平臺的推薦系統(tǒng)及其相關(guān)協(xié)作系統(tǒng)。這些協(xié)作系統(tǒng)保證了推薦系統(tǒng)的正常運行。其中存儲系統(tǒng)作為數(shù)據(jù)的存儲支撐,保證系統(tǒng)數(shù)據(jù)的可靠性和存取效率,展示頁面是聯(lián)系推薦系統(tǒng)與用戶的重要橋梁,利用Dubbox框架將系統(tǒng)改進成服務(wù)化架構(gòu),解耦整個系統(tǒng),使系統(tǒng)能夠橫向擴展。
  2、本文著重介紹了推薦系統(tǒng)的核心——推薦引擎,深入研究其算法,包括協(xié)同過濾推薦算法和基于題材相關(guān)性推薦

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 眾賞文庫僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責。
  • 6. 下載文件中如有侵權(quán)或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

最新文檔

評論

0/150

提交評論