(轉)主要的推薦算法簡介
轉載:http://blog.sina.com.cn/s/blog_602feaa80100fjq9.html
在推薦系統簡介中,我們給出了推薦系統的一般框架。很明顯,推薦方法是整個推薦系統中最核心、最關鍵的部分,很大程度上決定了推薦系統性能的優劣。目前,主要的推薦方法包括:基於內容推薦、協同過濾推薦、基於關聯規則推薦、基於效用推薦、基於知識推薦和組合推薦。
一、基於內容推薦
基於內容的推薦(Content-based Recommendation)是信息過濾技術的延續與發展,它是建立在項目的內容信息上作出推薦的,而不需要依據用戶對項目的評價意見,更多地需要用機器學習的方法從關於內容的特征描述的事例中得到用戶的興趣資料。在基於內容的推薦系統中,項目或對象是通過相關的特征的屬性來定義,系統基於用戶評價對象的特征,學習用戶的興趣,考察用戶資料與待預測項目的相匹配程度。用戶的資料模型取決於所用學習方法,常用的有決策樹、神經網絡和基於向量的表示方法等。基於內容的用戶資料是需要有用戶的歷史數據,用戶資料模型可能隨著用戶的偏好改變而發生變化。
基於內容推薦方法的優點是:
l 1)不需要其它用戶的數據,沒有冷開始問題和稀疏問題。
l 2)能為具有特殊興趣愛好的用戶進行推薦。
l 3)能推薦新的或不是很流行的項目,沒有新項目問題。
l 4)通過列出推薦項目的內容特征,可以解釋為什麽推薦那些項目。
l 5)已有比較好的技術,如關於分類學習方面的技術已相當成熟。
缺點是要求內容能容易抽取成有意義的特征,要求特征內容有良好的結構性,並且用戶的口味必須能夠用內容特征形式來表達,不能顯式地得到其它用戶的判斷情況。
二、協同過濾推薦
協同過濾推薦(Collaborative Filtering Recommendation)技術是推薦系統中應用最早和最為成功的技術之一。它一般采用最近鄰技術,利用用戶的歷史喜好信息計算用戶之間的距離,然後利用目標用戶的最近鄰居用戶對商品評價的加權評價值來預測目標用戶對特定商品的喜好程度,系統從而根據這一喜好程度來對目標用戶進行推薦。協同過濾最大優點是對推薦對象沒有特殊的要求,能處理非結構化的復雜對象,如音樂、電影。
協同過濾是基於這樣的假設:為一用戶找到他真正感興趣的內容的好方法是首先找到與此用戶有相似興趣的其他用戶,然後將他們感興趣的內容推薦給此用戶。其基本思想非常易於理解,在日常生活中,我們往往會利用好朋友的推薦來進行一些選擇。協同過濾正是把這一思想運用到電子商務推薦系統中來,基於其他用戶對某一內容的評價來向目標用戶進行推薦。
基於協同過濾的推薦系統可以說是從用戶的角度來進行相應推薦的,而且是自動的,即用戶獲得的推薦是系統從購買模式或瀏覽行為等隱式獲得的,不需要用戶努力地找到適合自己興趣的推薦信息,如填寫一些調查表格等。
和基於內容的過濾方法相比,協同過濾具有如下的優點:
l1) 能夠過濾難以進行機器自動內容分析的信息,如藝術品,音樂等。
l2)共享其他人的經驗,避免了內容分析的不完全和不精確,並且能夠基於一些復雜的,難以表述的概念(如信息質量、個人品味)進行過濾。
l3)有推薦新信息的能力。可以發現內容上完全不相似的信息,用戶對推薦信息的內容事先是預料不到的。這也是協同過濾和基於內容的過濾一個較大的差別,基於內容的過濾推薦很多都是用戶本來就熟悉的內容,而協同過濾可以發現用戶潛在的但自己尚未發現的興趣偏好。
l4) 能夠有效的使用其他相似用戶的反饋信息,較少用戶的反饋量,加快個性化學習的速度。
雖然協同過濾作為一種典型的推薦技術有其相當的應用,但協同過濾仍有許多的問題需要解決。最典型的問題有稀疏問題(Sparsity)和可擴展問題(Scalability)。
三、基於關聯規則推薦
基於關聯規則的推薦(Association Rule-based Recommendation)是以關聯規則為基礎,把已購商品作為規則頭,規則體為推薦對象。關聯規則挖掘可以發現不同商品在銷售過程中的相關性,在零售業中已經得到了成功的應用。管理規則就是在一個交易數據庫中統計購買了商品集X的交易中有多大比例的交易同時購買了商品集Y,其直觀的意義就是用戶在購買某些商品的時候有多大傾向去購買另外一些商品。比如購買牛奶的同時很多人會同時購買面包。
算法的第一步關聯規則的發現最為關鍵且最耗時,是算法的瓶頸,但可以離線進行。其次,商品名稱的同義性問題也是關聯規則的一個難點。
四、基於效用推薦
基於效用的推薦(Utility-based Recommendation)是建立在對用戶使用項目的效用情況上計算的,其核心問題是怎麽樣為每一個用戶去創建一個效用函數,因此,用戶資料模型很大程度上是由系統所采用的效用函數決定的。基於效用推薦的好處是它能把非產品的屬性,如提供商的可靠性(Vendor Reliability)和產品的可得性(Product Availability)等考慮到效用計算中。
五、基於知識推薦
基於知識的推薦(Knowledge-based Recommendation)在某種程度是可以看成是一種推理(Inference)技術,它不是建立在用戶需要和偏好基礎上推薦的。基於知識的方法因它們所用的功能知識不同而有明顯區別。效用知識(Functional Knowledge)是一種關於一個項目如何滿足某一特定用戶的知識,因此能解釋需要和推薦的關系,所以用戶資料可以是任何能支持推理的知識結構,它可以是用戶已經規範化的查詢,也可以是一個更詳細的用戶需要的表示。
六、組合推薦
由於各種推薦方法都有優缺點,所以在實際中,組合推薦(Hybrid Recommendation)經常被采用。研究和應用最多的是內容推薦和協同過濾推薦的組合。最簡單的做法就是分別用基於內容的方法和協同過濾推薦方法去產生一個推薦預測結果,然後用某方法組合其結果。盡管從理論上有很多種推薦組合方法,但在某一具體問題中並不見得都有效,組合推薦一個最重要原則就是通過組合後要能避免或彌補各自推薦技術的弱點。
在組合方式上,有研究人員提出了七種組合思路:
l1)加權(Weight):加權多種推薦技術結果。
l2)變換(Switch):根據問題背景和實際情況或要求決定變換采用不同的推薦技術。
l3)混合(Mixed):同時采用多種推薦技術給出多種推薦結果為用戶提供參考。
l4)特征組合(Feature combination):組合來自不同推薦數據源的特征被另一種推薦算法所采用。
l5)層疊(Cascade):先用一種推薦技術產生一種粗糙的推薦結果,第二種推薦技術在此推薦結果的基礎上進一步作出更精確的推薦。
l6)特征擴充(Feature augmentation):一種技術產生附加的特征信息嵌入到另一種推薦技術的特征輸入中。
l7)元級別(Meta-level):用一種推薦方法產生的模型作為另一種推薦方法的輸入。
七、主要推薦方法的對比
各種推薦方法都有其各自的優點和缺點,見表1。
表1 主要推薦方法對比 |
||
推薦方法 | 優點 | 缺點 |
基於內容推薦 | 推薦結果直觀,容易解釋;
不需要領域知識 |
新用戶問題;
復雜屬性不好處理; 要有足夠數據構造分類器 |
協同過濾推薦 | 新異興趣發現、不需要領域知識;
隨著時間推移性能提高; 推薦個性化、自動化程度高; 能處理復雜的非結構化對象 |
稀疏問題;
可擴展性問題; 新用戶問題; 質量取決於歷史數據集; 系統開始時推薦質量差; |
基於規則推薦 | 能發現新興趣點;
不要領域知識 |
規則抽取難、耗時;
產品名同義性問題; 個性化程度低; |
基於效用推薦 | 無冷開始和稀疏問題;
對用戶偏好變化敏感; 能考慮非產品特性 |
用戶必須輸入效用函數;
推薦是靜態的,靈活性差; 屬性重疊問題; |
基於知識推薦 | 能把用戶需求映射到產品上;
能考慮非產品屬性 |
知識難獲得;
推薦是靜態的 |
(轉)主要的推薦算法簡介