基於網絡搜索數據的品牌汽車銷量預測研究

謝天保,崔田

(西安理工大學,陝西 西安 710054)

摘要:隨著大數據時代的到來,基於網絡數據的應用研究已成為熱點。以品牌汽車銷量預測為目標,將傳統相關性分析與基於LASSO的特徵選擇方法相結合,選取相關品牌的網絡搜索數據關鍵特徵,而後建立了LASSO線性迴歸、支持向量迴歸和隨機森林三種機器學習預測模型,並與傳統ARIMA模型進行比較分析。實驗結果表明,隨機森林模型的預測平均誤差為6.4%,比ARIMA模型降低了12.2個百分點,預測結果可為汽車企業生產規劃和制定營銷方案提供有效的決策支持。

網絡搜索數據;汽車銷量預測;LASSO特徵選擇;機器學習算法

中圖分類號:F272.1;TP181文獻標識碼:ADOI:10.19358/j.issn.2096-5133.2018.08.012

引用格式:謝天保,崔田.基於網絡搜索數據的品牌汽車銷量預測研究[J].信息技術與網絡安全,2018,37(8):50-53.

Research on brand vehicle sales forecasting based on network search data

Xie Tianbao,Cui Tian

(Xi’an University of Technology, Xi’an 710054, China)

Abstract: With the advent of the big data era, application research based on network data has become a hot spot. Aiming at brand car sales forecasting,this paper combined the traditional correlation analysis with the LASSO feature selection method to select the key features of the web search data of the related brands, and then established three machine learning prediction models of penalty linear regression, support vector regression and random forest and compared with the traditional ARIMA model. The experimental results show that the average prediction error of random forest model is 6.4%, which is 12.2% lower than that of ARIMA model. The forecast results can provide more effective decision support for the production planning and marketing plan of automobile manufacturing enterprises.

Key words:network search data;vehicle sales forecasting;LASSO feature selection; machine learning algorithm

0 引言

近年來,我國汽車產銷呈現較快增長,產銷總量屢創歷史新高,據中國汽車工業協會統計數據,2016年中國汽車產銷均超2 800萬輛,連續八年蟬聯全球第一[1]。據車主之家網站提供的數據顯示,2009~2016年我國銷量排名前十的品牌汽車佔比高達55.84%,對於我國汽車消費者而言,品牌效應十分顯著。但是汽車生產廠商追求規模效應時存在一定的盲目性,導致產能過剩的問題日益凸顯。在嚴峻的形勢下,汽車生產企業應認真分析市場未來的需求量和可能存在的變化趨勢,合理規劃生產計劃,採用以銷定產的生產策略。因此如何準確地預測銷量,對於汽車生產企業研究市場行情及時調整生產經營策略有著極其重要的意義。隨著人工智能的出現以及基於網絡數據的預測研究的廣泛開展,將網絡搜索數據應用於汽車銷量的預測已成為研究的熱點。

傳統的汽車銷量預測研究採用的主要方法有灰色系統理論[2]、時間序列模型[3]以及人工神經網絡[4]等,但這些研究採用的數據時間粒度比較大,研究對象大都集中於我國汽車年度總銷量的預測,研究成果難以應用推廣。文獻[5]在建立網絡關鍵詞搜索數據與汽車銷量理論框架的基礎上,使用自動推薦技術選取關鍵詞並進行關鍵詞合成,然後針對不同價格區間的汽車銷量與相應合成指數進行建模預測且平均絕對誤差百分數均不超過4%,但是同一價格區間內包含眾多不同品牌車型,預測結果無法提供有價值的決策支持;文獻[6]、文獻[7]針對大眾途觀和寶馬汽車銷量進行預測研究,通過人工方式進行網絡數據關鍵詞的選取,發現加入百度關鍵詞作為解釋變量的模型相比傳統的ARMA模型,預測精度有了一定程度的提高;文獻[8]利用經濟變量和谷歌在線搜索數據建立預測月度汽車銷售數據的多變量模型,結果表明包括谷歌搜索數據在內的模型在統計上超過了大多數預測領域的傳統模型;文獻[9]提出了一種搜索數據關鍵特徵選取方法,但是該選取方法最終僅僅保留了相關性最高的一個關鍵特徵,難免會造成有效信息的損失。

綜上所述,目前的研究存在的問題包括研究對象與時間粒度選擇不當,網絡數據特徵分析及選取的科學體系暫未形成,傳統模型預測性能具有侷限性。本文擬基於網絡搜索數據,將品牌汽車銷量作為研究對象,時間粒度選取為月度,將傳統相關性分析與基於LASSO的特徵選擇方法相結合,篩選出最優的關鍵特徵數據,然後應用多種機器學習算法建立品牌汽車銷量的預測模型,從而實現針對性更強、更準確、更具有應用價值的品牌汽車銷量的預測。

1 網絡搜索數據關鍵特徵選取

本文選取“大眾”、“本田”、“奧迪”三個比較有代表性的品牌汽車作為研究對象,收集了2011年1月~2017年12月期間各品牌汽車月度銷量數據。根據消費者購買決策過程,消費者在產生購車需求後,大多數購車消費者都會通過搜索引擎從網絡中快速獲取到所需要的信息,而關鍵詞搜索是在線信息搜索時最常用的策略,所以將用戶搜索關鍵詞作為網絡搜索數據的關鍵特徵。本文選擇國內應用最為廣泛的百度搜索引擎的百度指數作為網絡搜索關鍵詞數據來源。下面以“大眾”品牌汽車為例進行詳細說明。

1.1 關鍵詞的選取及拓展

本文采用文本挖掘的方法,結合汽車品牌、熱銷車型信息、車型配置指標數據等各個方面的信息,對網絡上與大眾品牌汽車相關的新聞、論壇文章、點評、分享交流等信息進行查找收集,剔除掉一些無用信息後,再使用NLPIR漢語分詞系統對原始文本進行關鍵詞提取,得到關鍵詞列表及其權重,選定其中權值較高的“大眾”、“大眾4S店”、“大眾SUV”、“大眾POLO”、“大眾商務車”等為初始關鍵詞。然後圍繞選取的初始關鍵詞綜合使用了長尾關鍵詞拓展法、站長工具以及網頁相關搜索推薦等方法拓展出數量更多的關鍵詞,剔除重複或者有歧義的關鍵詞後建立了一個包含276個關鍵詞的初始詞庫。

1.2 關鍵詞搜索指數相關性分析

首先利用網絡爬蟲工具獲取初始詞庫中各關鍵詞相同時間段內月度搜索數據,針對關鍵詞搜索數據進行預處理(剔除缺失數據超過6個月或者搜索指數過低的關鍵詞數據),最後得到118個符合要求的關鍵詞搜索數據。但是並不是每個關鍵詞搜索數據都與實際銷量存在相關關係。所以本文首先應用傳統相關性分析方法通過判定各個關鍵詞搜索數據與大眾品牌汽車銷量的Spearman秩相關係數,篩選出相關係數大於0.5的搜索關鍵詞(顯著相關),共計37個。然後採用時差相關分析確定上一步篩選出的關鍵詞搜索指數與大眾品牌汽車銷量的時滯階數均處於滯後1~3階的範圍(網絡搜索行為是一種即時性行為,而購買汽車作為重大經濟決策,消費者一般都會在做出購買決策前幾個月就開始搜索相關的信息)。

現有研究針對相關性分析結果一般有兩種處理方法:第一種是直接選取相關性最高的作為唯一的解釋變量;第二種是利用指數合成方法將合成後的關鍵指數作為解釋變量。兩種方法難免都會造成有效信息的損失。但是若保留所有的解釋變量,解釋變量之間也可能存在多重共線性,所以本文在相關性分析基礎上應用LASSO算法來進一步分析與選取特徵[10]

1.3 基於LASSO的特徵選取

在高維數據變量選擇方法的研究領域中,Tibshirani在1996年提出普通線性模型下的Least Absolute Shrinkage and Selection Operate(LASSO)算法,LASSO算法就是在損失函數後面加上懲罰項(即L1正則項),L1正則項可以約束方程的稀疏性,這種稀疏性即可應用於特徵的選擇,這種方法與傳統的算法相比優點在於可以在進行連續的變量選擇的同時進行模型參數估計[11]。而且LASSO算法可以有效解決解釋變量多重共線性的問題,使得後續建立的模型擁有穩定的性能。

針對上一節相關性分析結果,採用R語言中的glmnet包實現的LASSO算法對關鍵詞搜索數據進行分析與特徵選取。通過分析模型的Lambda解路徑圖可以發現,隨著懲罰的力度加大,越來越多的變量係數會被壓縮為0,而那些在Lambda比較大時仍然擁有非零係數的變量就是越重要的解釋變量

[12-13]。本文選取平均絕對誤差(MAE)作為評價指標,通過交叉驗證得到最優Lambda值,模型MAE與Lambda之間的關係如圖1所示。

基于网络搜索数据的品牌汽车销量预测研究

圖1中左側虛線是最佳Lambda取值(lambda.min=0.143 065),也就是模型MAE最低時的Lambda取值,此時非零係數的變量個數僅為12個,相比之前37個關鍵詞特徵數據已經大幅度地縮減。通過查看coefficients參數可以得到模型的Intercept為5.630 547 963 2,所選取的關鍵詞變量及其所對應的參數估計如表1所示。

基于网络搜索数据的品牌汽车销量预测研究

至此,本文首先進行關鍵詞的選取及拓展,然後將傳統相關性分析與基於LASSO的特徵選擇相結合應用於搜索數據關鍵詞選取,最終選出針對“大眾”品牌汽車的12個網絡搜索數據關鍵特徵。使用同樣的方法,篩選得出“本田”及“奧迪”品牌汽車對應的網絡搜索數據關鍵特徵分別為12個和13個。

2 實驗分析與討論

通過LASSO算法的應用有效地解決了解釋變量多重共線性的問題,同時在特徵選擇的過程中也得到了LASSO線性迴歸模型參數估計,但是該模型及現有研究大都使用基於最小二乘法的線性迴歸模型,都無法解決異方差性及解釋變量與被解釋變量非線性關係的問題,這就會增加係數估計值的方差,結果造成係數估計值不穩定,對異常值非常敏感,繼而會嚴重影響迴歸線,最終影響預測值的準確度[14]。所以本文又選取了兩種非線性的機器學習算法建立模型並進行詳細的對比分析。

本文選取2011年1月~2016年12月的數據作為訓練集,將2017年12個月的數據作為測試集,採用R語言針對“大眾”、“本田”、“奧迪”品牌汽車的銷量預測建立了支持向量迴歸模型及隨機森林模型,按照MAE值最小原則應用網格搜索法(GridSearch)進行模型參數調優,同時針對三個品牌建立傳統的時間序列預測模型——自迴歸積分滑動平均模型(ARIMA)進行綜合比較分析。為了有效和直觀地衡量不同模型的預測能力,本文選取均方根誤差(RMSE)、平均絕對百分比誤差(MAPE)兩個指標來評估預測結果,各模型測試集預測結果如表2所示。

基于网络搜索数据的品牌汽车销量预测研究

從表2可以看出,無論從RMSE還是MAPE來說,機器學習模型的預測效果均有顯著優勢,相比傳統的時間序列ARIMA模型大幅度提高了預測準確度,而且從MAPE指標結果來看,ARIMA模型對於不同品牌汽車銷量預測差異非常大(奧迪比本田高了近15%),機器學習模型預測性能比較穩定。所有模型中性能最優的是隨機森林模型,預測平均誤差為6.4%,比ARIMA模型降低了12.2個百分點,相比文獻[15]、[16]對大眾及奧迪相同品牌汽車月度銷量預測的MAPE分別降低了2.81%和4.63%,預測精度有了顯著提升。從本質上分析,網絡搜索數據與對應品牌汽車銷量之間的關係並不是單純的線性關係,其中非線性關係的程度應該大於線性關係的程度,因而兩種非線性機器學習模型的預測更為精確。

以“大眾”為例展示各模型測試集的預測值與實際值對比如圖2所示。其中可以看出LASOO線性迴歸模型(圖(b))及支持向量迴歸模型(圖(c))的預測精度明顯優於ARIMA模型(圖(a)),ARIMA模型雖然能夠預測銷量的基本趨勢,但整體預測效果比較差,而且以上三種模型的峰值敏感度都較低,即對峰值的預測誤差均比較大。通過與隨機森林模型(圖(d))進行對比,可以清晰直觀地看出,隨機森林模型與其他模型相比在峰值預測準確度上有明顯差異,顯然隨機森林模型對於峰值和整體預測的結果都更精確。由此可以得出結論,針對汽車品牌粒度的月度銷量預測問題,建立基於網絡搜索數據關鍵特徵的隨機森林模型是一種切實可行的方案。

基于网络搜索数据的品牌汽车销量预测研究

3 結論

本文以品牌汽車銷量為研究對象,通過關鍵詞的選取及拓展,將相關性分析與基於LASSO的特徵選擇相結合,最終篩選出針對不同品牌汽車的網絡搜索數據關鍵特徵,在解決多重共線性及減少過擬合的基礎上保留最有效的數據,然後分別建立了傳統時間序列模型及三種機器學習模型,通過對實驗結果進行分析,發現機器學習模型的預測效果均有顯著優勢,其中隨機森林模型預測性能最優。本文提出的基於網絡搜索數據的預測方法可以利用前期網絡搜索數據預測後續汽車銷量,而相應品牌的汽車生產廠商可以根據預測結果及時調整企業的生產和營銷策略。模型的可靠性檢驗及推廣應用是接下來的研究方向。

參考文獻

[1] 中國汽車工業協會.中國汽車工業發展年度報告(2016)[M].北京:社會科學文獻出版社,2016.

[2] 黃琦.基於灰色理論的汽車銷售量預測研究[J].機械製造,2013,51(4):78-80.

[3] 胡彥君.ARIMA模型在汽車銷量預測中的應用及SAS實現[J].河北企業,2012(4):11-12.

[4] 王旭天. 基於BP神經網絡的我國汽車銷量預測分析[D].上海:東華大學,2016.

[5] 袁慶玉,彭賡,劉穎,等.基於網絡關鍵詞搜索數據的汽車銷量預測研究[J].管理學家(學術版),2011(1):12-24.

[6] 孔令頂.基於互聯網搜索量的大眾途觀汽車銷量預測研究[J].時代金融,2015(30):222,226.

[7] 王守中,崔東佳,彭賡.基於Web搜索數據的寶馬汽車銷量預測研究[J].經濟師,2013(12):22-24,26.

[8] FANTAZZINI D, TOKTAMYSOVA Z. Forecasting german car sales using Google data and multivariate models[J].International Journal of Production Economics,2015,170: 97-135.

[9] 李憶,文瑞,楊立成.網絡搜索指數與汽車銷量關係研究——基於文本挖掘的關鍵詞獲取[J].現代情報,2016,36(8):131-136,177.

[10] 趙東波. 線性迴歸模型中多重共線性問題的研究[D].錦州:渤海大學,2017.

[11] 李鋒,蓋玉潔,盧一強.測量誤差模型的自適應LASSO變量選擇方法研究[J].中國科學:數學,2014,44(9):983-1006.

[12] 劉曉寧.基於Lasso特徵選擇的方法比較[J].安徽電子信息職業技術學院學報,2014,13(1):26-30.

[13] 李春紅,吳英,覃朝勇.基於LASSO變量選擇方法的網絡廣告點擊率預測模型研究[J].數理統計與管理,2016,35(5):803-809.

[14] 郭貔,王力,郝元濤.基於LASSO迴歸模型與百度搜索數據構建的流感疫情預測系統[J].中國衛生統計,2017,34(2):186-191.

[15] 崔東佳. 大數據時代背景下的品牌汽車銷量預測的實證研究[D].開封:河南大學,2014.

[16] 田銳鋒.用季節性交乘模型預測奧迪汽車在華銷量[J].統計與管理,2016(8):70-71.

(收稿日期:2018-04-03)

謝天保(1966-),男,博士,副教授,主要研究方向:數據挖掘、電子商務與決策支持。

崔田(1991-),通信作者,男,碩士研究生,主要研究方向:數據挖掘、電子商務。E-mail:[email protected]


分享到:


相關文章: