劉世偉+呂景楠+莫蘭

【摘 要】為了降低客戶升級(jí)投訴數(shù)量，通過(guò)對(duì)客戶投訴現(xiàn)狀進(jìn)行分析，發(fā)現(xiàn)投訴處理環(huán)節(jié)的短板和不足，并利用大數(shù)據(jù)工具，使用海量的客戶投訴數(shù)據(jù)建立預(yù)測(cè)模型，對(duì)有升級(jí)傾向的投訴客戶進(jìn)行預(yù)判，在投訴升級(jí)之前預(yù)先解決客戶的問(wèn)題，從而提升客戶滿意度。

【關(guān)鍵詞】大數(shù)據(jù) 客戶投訴 決策樹(shù) 預(yù)測(cè)模型

doi：10.3969/j.issn.1006-1010.2017.08.016 中圖分類(lèi)號(hào)：TP181 文獻(xiàn)標(biāo)志碼：A 文章編號(hào)：1006-1010（2017）08-0079-06

引用格式：劉世偉，呂景楠，莫蘭. 基于客戶投訴信息的創(chuàng)新預(yù)測(cè)方法研究[J]. 移動(dòng)通信， 2017，41（8）： 79-84.

Research on an Novel Prediction Method Based on Customer Complaint Information

LIU Shiwei， LV Jingnan， MO Lan

[Abstract] In order to reduce the number of customers complaints against upgrade， the status of customers complaints was analyzed and shortcomings of complaint link were elaborated. By virtue of mathematical tools， the prediction model based on massive customers complaints was established to determine the potential customers apt to complain. Thus， the appeal of customers could be solved before upgrade to enhance the satisfaction of customers.

[Key words]big data customer complaint decision tree prediction model

1 研究背景

隨著移動(dòng)業(yè)務(wù)產(chǎn)品、營(yíng)銷(xiāo)活動(dòng)開(kāi)展的多樣化，客戶建議、投訴越來(lái)越多，同時(shí)工信部對(duì)運(yùn)營(yíng)商新增了“用戶申訴率”和“不明扣費(fèi)申訴率”兩條紅線的考核，這也增加了運(yùn)營(yíng)商投訴部門(mén)的工作壓力。面對(duì)客戶規(guī)?；耐对V，應(yīng)當(dāng)建立更加科學(xué)化的系統(tǒng)管理機(jī)制，改善當(dāng)前傳統(tǒng)管理方式，使兩條紅線指標(biāo)控制在合理的范圍內(nèi)，進(jìn)而避免客戶產(chǎn)生升級(jí)投訴，更好地提升客戶忠誠(chéng)度和滿意率，增加業(yè)務(wù)產(chǎn)品的良好口碑。

數(shù)字化、系統(tǒng)化使得企業(yè)擁有大量的客戶投訴數(shù)據(jù)，但并沒(méi)有很好地利用這些數(shù)據(jù)進(jìn)行挖掘分析，也未能有效地從這些數(shù)據(jù)中找到客戶的需求點(diǎn)，無(wú)法真正了解客戶的意圖。服務(wù)及產(chǎn)品改進(jìn)和創(chuàng)新需要了解客戶最真實(shí)的需求，對(duì)客戶投訴信息的挖掘和分析是關(guān)鍵。但是，目前還沒(méi)有基于客戶投訴信息來(lái)獲得改進(jìn)和創(chuàng)新思路的成功方法，更多是人工根據(jù)多年的工作經(jīng)驗(yàn)進(jìn)行淺層次的數(shù)據(jù)分析，難以形成說(shuō)服力的建議。

因此，可以通過(guò)對(duì)客戶投訴數(shù)據(jù)進(jìn)行深度的大數(shù)據(jù)分析和挖掘，提煉出各維度的權(quán)重，從投訴信息中挖掘隱含的客戶需求和商機(jī)，進(jìn)而獲得服務(wù)及產(chǎn)品改進(jìn)和創(chuàng)新思路的方法。有效地利用客戶投訴數(shù)據(jù)建立模型，對(duì)有升級(jí)傾向的投訴客戶進(jìn)行預(yù)判，在投訴升級(jí)之前預(yù)先解決客戶的問(wèn)題，以提高客戶滿意度。通過(guò)建模構(gòu)建了中國(guó)移動(dòng)投訴信息挖掘平臺(tái)，使得信息處理系統(tǒng)化、有序化和智能化，工作價(jià)值得到進(jìn)一步提升，從而形成長(zhǎng)效工作機(jī)制，為中國(guó)移動(dòng)轉(zhuǎn)型和可持續(xù)發(fā)展提供強(qiáng)有力支撐和幫助，加強(qiáng)投訴信息利用和創(chuàng)新，提高企業(yè)核心競(jìng)爭(zhēng)力。

2 客戶投訴分析

2.1 客戶投訴的現(xiàn)狀

投訴是客戶不滿意的表達(dá)，更能貼切反映客戶對(duì)產(chǎn)品業(yè)務(wù)的滿意度。客戶投訴數(shù)據(jù)主要通過(guò)文本和語(yǔ)音格式保留、投訴系統(tǒng)記錄保留這兩種方式存儲(chǔ)。當(dāng)前客戶投訴信息主要用于解決客戶投訴的具體問(wèn)題，對(duì)投訴背后的隱性問(wèn)題分析很少，也沒(méi)有有效地通過(guò)投訴信息挖掘獲得服務(wù)和產(chǎn)品改進(jìn)、創(chuàng)新思路。另外，當(dāng)前客戶投訴處理環(huán)節(jié)比較傳統(tǒng)化，未有較好的創(chuàng)新點(diǎn)。

2.2 客戶投訴面臨的問(wèn)題

（1）投訴預(yù)警不及時(shí)

投訴預(yù)防不到位，缺乏事前分析的信息、工具，對(duì)客戶投訴的熱點(diǎn)問(wèn)題、風(fēng)險(xiǎn)問(wèn)題缺乏有效的監(jiān)控手段。同時(shí)投訴處理環(huán)節(jié)效率較低，處理效果欠佳，相對(duì)應(yīng)的投訴處理手段有限，未能做到精準(zhǔn)的客戶投訴信息定向挖掘。另外，應(yīng)對(duì)客群關(guān)系欠缺有效的策略，導(dǎo)致投訴頑疾長(zhǎng)期存在，投訴處理沒(méi)有形成較好的閉環(huán)。

（2）投訴數(shù)據(jù)不準(zhǔn)確

客戶投訴信息中記錄字段多，并且字段信息記錄出現(xiàn)缺失、錯(cuò)誤。另外，前臺(tái)的手工填寫(xiě)文本字段太多，沒(méi)有統(tǒng)一的分類(lèi)選擇標(biāo)準(zhǔn)，文本信息太過(guò)繁雜。而客戶投訴信息的缺失、異常和噪聲數(shù)據(jù)太多會(huì)直接影響數(shù)據(jù)挖掘結(jié)果。

（3）衍生的問(wèn)題

由此衍生出升級(jí)投訴量波動(dòng)大、升級(jí)投訴無(wú)法預(yù)測(cè)、投訴缺少過(guò)程管控、重點(diǎn)投訴無(wú)法規(guī)避以及關(guān)鍵環(huán)節(jié)無(wú)法回歸、重點(diǎn)問(wèn)題重復(fù)發(fā)生等問(wèn)題，因此需進(jìn)一步借助模型數(shù)據(jù)分析來(lái)優(yōu)化并解決當(dāng)前問(wèn)題，以提升客戶滿意度。

3 決策樹(shù)模型助力客戶投訴

3.1 預(yù)測(cè)模型的處理方法

中國(guó)移動(dòng)擁有海量的客戶投訴數(shù)據(jù)并不斷更新，要獲得服務(wù)、產(chǎn)品改進(jìn)及創(chuàng)新思路，必須借助數(shù)據(jù)分析和挖掘。利用數(shù)據(jù)挖掘技術(shù)提取可能升級(jí)投訴的客戶，以達(dá)到事前預(yù)警升級(jí)的目的，可采用國(guó)際通用CRISP-DM（Cross-Industry Standard Process for Data Mining，跨行業(yè)數(shù)據(jù)挖掘標(biāo)準(zhǔn)流程）數(shù)據(jù)挖掘建模有效地解決這個(gè)問(wèn)題。

CRISP-DM將模型分為6個(gè)階段：商業(yè)理解→數(shù)據(jù)理解→數(shù)據(jù)準(zhǔn)備→建?！u(píng)估→部署。CRISP-DM數(shù)據(jù)挖掘建模標(biāo)準(zhǔn)化流程如圖1所示。

3.2 升級(jí)投訴預(yù)警模型數(shù)據(jù)挖掘?qū)嵺`

（1）數(shù)據(jù)準(zhǔn)備

1）數(shù)據(jù)清洗體系建設(shè)

將升級(jí)投訴數(shù)據(jù)來(lái)源進(jìn)行梳理整合，主要包括如下：

數(shù)據(jù)來(lái)源確認(rèn)：確認(rèn)升級(jí)工單的7個(gè)數(shù)據(jù)來(lái)源，對(duì)數(shù)據(jù)大小和數(shù)據(jù)質(zhì)量進(jìn)行初步驗(yàn)證。

數(shù)據(jù)質(zhì)量管理：將缺失數(shù)據(jù)、異常數(shù)據(jù)、噪聲數(shù)據(jù)進(jìn)行數(shù)據(jù)清洗，保證數(shù)據(jù)符合建模的要求。

數(shù)據(jù)預(yù)備體系建設(shè)：將數(shù)據(jù)來(lái)源、數(shù)據(jù)清理、數(shù)據(jù)整合/規(guī)約、數(shù)據(jù)驗(yàn)證、入庫(kù)等各階段任務(wù)進(jìn)行統(tǒng)一系統(tǒng)管理，實(shí)現(xiàn)整個(gè)前端數(shù)據(jù)處理流圖的自動(dòng)化和智能化管理。具體如圖2所示。

2）數(shù)據(jù)梳理成果

在數(shù)據(jù)梳理成果中，主要是數(shù)據(jù)梳理的建模維度和字段，具體包括如下：

寬表設(shè)計(jì)：很多常用模型在集團(tuán)規(guī)范中都有明確的業(yè)務(wù)描述和寬表設(shè)計(jì)，可以直接參考使用。業(yè)務(wù)人員結(jié)合經(jīng)驗(yàn)定義寬表結(jié)構(gòu)，并對(duì)寬表字段進(jìn)行適當(dāng)添加、刪減、調(diào)整。技術(shù)人員在業(yè)務(wù)人員指導(dǎo)下對(duì)某些重要字段進(jìn)行衍生，如通話次數(shù)衍生出占比、趨勢(shì)、波動(dòng)。

通過(guò)預(yù)先設(shè)定數(shù)據(jù)處理的可視化功能節(jié)點(diǎn)，以達(dá)到可視化進(jìn)行數(shù)據(jù)清洗和數(shù)據(jù)轉(zhuǎn)換的目的。針對(duì)縮減并集成后的數(shù)據(jù)，通過(guò)組合預(yù)處理子系統(tǒng)提供各種數(shù)據(jù)處理功能節(jié)點(diǎn)，能夠以可視化的方式快速有效地完成數(shù)據(jù)清洗和數(shù)據(jù)轉(zhuǎn)換過(guò)程。

數(shù)據(jù)清洗：對(duì)缺失數(shù)據(jù)進(jìn)行填充，如終端信息不全由業(yè)務(wù)部門(mén)提供后補(bǔ)充。有些缺失數(shù)據(jù)也可以通過(guò)技術(shù)手段（如均值、中位數(shù)、眾數(shù)等）填充。對(duì)業(yè)務(wù)意義相同的數(shù)據(jù)進(jìn)行合并加工，如“NOTE3”與“note3”。諸如流量等指標(biāo)會(huì)出現(xiàn)異常大/小的數(shù)值，可采取“封頂保底”或者分層的策略，視情況使用。

數(shù)據(jù)抽?。簭牟煌臄?shù)據(jù)來(lái)源中，通過(guò)ETL（Extract Transform Load，數(shù)據(jù)倉(cāng)庫(kù)技術(shù)）工具或者編程技術(shù)生成寬表數(shù)據(jù)，供后期做數(shù)據(jù)挖掘。

3）數(shù)據(jù)梳理總結(jié)

在數(shù)據(jù)梳理過(guò)程中，針對(duì)遇到的各項(xiàng)問(wèn)題采取了相應(yīng)的解決方案，具體如下：

字段分類(lèi)過(guò)多：分類(lèi)字段的類(lèi)別維度太小，漸趨于明細(xì)數(shù)據(jù)，如問(wèn)題細(xì)項(xiàng)有940多個(gè)分類(lèi)。字段分類(lèi)過(guò)多容易造成模型過(guò)度擬合及泛化性能較差，可以在系統(tǒng)設(shè)定時(shí)采用選項(xiàng)的方式而不是手工輸入方式。

數(shù)值型數(shù)據(jù)過(guò)多：基于特征選擇的結(jié)果梳理字段后，參與建模字段中分類(lèi)型字段有17個(gè)，數(shù)值型（連續(xù)型）數(shù)據(jù)字段有11個(gè)。對(duì)數(shù)值型數(shù)據(jù)的建模容易產(chǎn)生過(guò)度擬合或無(wú)屬性可分的情況，可以采取分箱或手工生成衍生字段來(lái)解決此問(wèn)題。

缺失值數(shù)據(jù)嚴(yán)重：部分重要建模字段的缺失值嚴(yán)重，主要是投訴反饋維度的相關(guān)字段，數(shù)據(jù)缺失值會(huì)導(dǎo)致模型的結(jié)果擬合效果差?；跀?shù)據(jù)狀況，可以采用忽略該條記錄、手工填補(bǔ)遺漏值、利用缺省值填補(bǔ)遺漏值等處理方法。

噪聲數(shù)據(jù)：異常值（噪聲數(shù)據(jù)）會(huì)嚴(yán)重影響后期的建模效果。對(duì)于異常點(diǎn)的數(shù)據(jù)，可以采用直接刪除異常數(shù)據(jù)的方法，也可以基于異常點(diǎn)檢驗(yàn)的方法再刪除。

（2）數(shù)據(jù)探索

1）整體投訴數(shù)據(jù)統(tǒng)計(jì)分析

數(shù)據(jù)探索主要是整理歷史客戶的整體投訴數(shù)據(jù)，然后根據(jù)相關(guān)整理的字段、因子進(jìn)行科學(xué)統(tǒng)計(jì)分析，探索數(shù)據(jù)特征。對(duì)客戶整體和一次升級(jí)客戶進(jìn)行分析，從投訴問(wèn)題分類(lèi)、投訴業(yè)務(wù)、投訴問(wèn)題的緊急程度等方面進(jìn)行深入分析。

2）數(shù)據(jù)探索結(jié)果

根據(jù)數(shù)據(jù)探索發(fā)現(xiàn)，數(shù)據(jù)業(yè)務(wù)影響客戶的升級(jí)投訴占比很大，同時(shí)費(fèi)用投訴也是主要因素，總體概況如下：

涉及數(shù)據(jù)業(yè)務(wù)和國(guó)際/港澳臺(tái)業(yè)務(wù)的投訴升級(jí)比率較高，并且這兩部分客戶的價(jià)值遠(yuǎn)高于普通客戶，因此應(yīng)重點(diǎn)關(guān)注這兩部分業(yè)務(wù)的投訴客戶，防止因投訴而流失重點(diǎn)客戶。

客戶在一次投訴沒(méi)有徹底解決或沒(méi)有相應(yīng)答復(fù)時(shí)會(huì)第一時(shí)間進(jìn)行升級(jí)投訴，這需要在發(fā)現(xiàn)客戶投訴時(shí)第一時(shí)間安撫客戶，防止因其情急而升級(jí)投訴。

費(fèi)用和業(yè)務(wù)退訂涉及到公司內(nèi)部系統(tǒng)數(shù)據(jù)對(duì)質(zhì)量管控的支持，后續(xù)可以建立與數(shù)據(jù)支持部門(mén)的溝通合作，對(duì)費(fèi)用和業(yè)務(wù)查詢快速響應(yīng)，及時(shí)解決客戶咨詢的問(wèn)題。

有過(guò)歷史投訴的客戶更容易升級(jí)，他們熟悉投訴流程，這需要建立重復(fù)投訴客戶名單，防止客戶多次升級(jí)投訴，并且當(dāng)投訴和抱怨積累一定次數(shù)時(shí)，都會(huì)轉(zhuǎn)化為升級(jí)。

針對(duì)一次升級(jí)客戶，事件的緊急程度和處理結(jié)果的滿意度與是否升級(jí)投訴沒(méi)有直接關(guān)聯(lián)。

（3）模型算法的選擇

根據(jù)前期梳理的數(shù)據(jù)源，分析數(shù)據(jù)源中各字段屬性，然后依據(jù)分類(lèi)算法的對(duì)比分析，篩選出基于現(xiàn)有數(shù)據(jù)源最優(yōu)的模型。

目前基于預(yù)測(cè)目標(biāo)分類(lèi)用戶的算法模型有很多，比較常用的是邏輯回歸、支持向量機(jī)、神經(jīng)網(wǎng)絡(luò)和決策樹(shù)。具體如下：

1）邏輯回歸是對(duì)訓(xùn)練數(shù)據(jù)的擬合，得到一個(gè)回歸模型，對(duì)數(shù)據(jù)進(jìn)行預(yù)測(cè)。

2）支持向量機(jī)是二類(lèi)分類(lèi)模型，為特征空間上的間隔最大的線性分類(lèi)。

3）神經(jīng)網(wǎng)絡(luò)是模仿人體神經(jīng)系統(tǒng)的感知機(jī)模型，算法較為復(fù)雜。

4）決策樹(shù)是一種基本的分類(lèi)與回歸方法，它可以被認(rèn)為是一種if-then規(guī)則的集合。決策樹(shù)是數(shù)據(jù)挖掘技術(shù)中的一種重要的分類(lèi)方法，它是一種以樹(shù)結(jié)構(gòu)（包括二叉樹(shù)或多叉樹(shù)）形式來(lái)表達(dá)的預(yù)測(cè)分析模型。

通過(guò)對(duì)邏輯回歸模型、支持向量機(jī)模型、神經(jīng)網(wǎng)絡(luò)模型、決策樹(shù)模型的詳細(xì)介紹及模型應(yīng)用場(chǎng)景的分析，基于現(xiàn)有數(shù)據(jù)源質(zhì)量和模型的適用條件，最終選擇決策樹(shù)作為實(shí)施模型。

（4）建立模型

1）確定維度字段

對(duì)字段的重要程度進(jìn)行初步預(yù)判，主要通過(guò)業(yè)務(wù)判斷、特征選擇、相關(guān)性分析選擇影響模型的字段，將選出的字段參與特征選擇過(guò)程，剔除對(duì)建模結(jié)果影響不顯著的字段，同時(shí)將與結(jié)果相關(guān)性強(qiáng)的字段為母本衍生出新的字段，并直接剔除母字段即利用新生成字段進(jìn)行建模分析。

基于7個(gè)數(shù)據(jù)來(lái)源，形成客戶投訴屬性、投訴反饋、客戶消費(fèi)行為、客戶屬性四大維度60個(gè)模型字段。經(jīng)特征選擇（主成份分析/降維）后，新增衍生字段維度，調(diào)整為五大維度28個(gè)字段參與建模。參與建模的維度字段如圖3所示：

2）建模流程

通過(guò)決策樹(shù)分類(lèi)算法運(yùn)算，得出評(píng)估模式的值或者預(yù)測(cè)值，最終將原始數(shù)據(jù)集進(jìn)行分類(lèi)，輸出預(yù)測(cè)結(jié)果。建模流程如圖4所示。

3）模型參數(shù)設(shè)置

決策樹(shù)模型設(shè)計(jì)的重要參數(shù)有Boosting次數(shù)、N折交叉驗(yàn)證、決策樹(shù)葉子修剪程度和誤分類(lèi)的成本，具體如下：

Boosting實(shí)驗(yàn)次數(shù)：Boosting采用投票方式判別，不會(huì)出現(xiàn)過(guò)度擬合問(wèn)題，當(dāng)實(shí)驗(yàn)次數(shù)設(shè)置越大時(shí)，花費(fèi)時(shí)間越久。

交叉驗(yàn)證：設(shè)置折疊次數(shù)K次，則將數(shù)據(jù)分為K份，每次運(yùn)行選擇其中一份作檢驗(yàn)集，其余的全作為訓(xùn)練集，該過(guò)程重復(fù)K次，使得每份數(shù)據(jù)都用于檢驗(yàn)一次。

修剪嚴(yán)重性：表示決策樹(shù)的修剪程度，為防止決策樹(shù)過(guò)度擬合，需修剪決策樹(shù)的枝葉，根據(jù)決策樹(shù)節(jié)點(diǎn)的深度，一般設(shè)置為75～80。

誤分類(lèi)的成本：基于模型效果的評(píng)估，當(dāng)設(shè)置矩陣中某一類(lèi)成本高時(shí)，則模型會(huì)自動(dòng)向成本低的方向移動(dòng)，可以根據(jù)模型的目標(biāo)追求準(zhǔn)確率或覆蓋率進(jìn)行設(shè)置。

4）模型優(yōu)化過(guò)程

初期模型中將7個(gè)來(lái)源表中的投訴數(shù)據(jù)進(jìn)行合并，整合各個(gè)數(shù)據(jù)表中的因子、字段，根據(jù)整理出的原始數(shù)據(jù)，采用決策樹(shù)模型中的C5.0算法建立模型，通過(guò)模型算法的運(yùn)算得出模型樣本的命中率為22%，能夠有效地達(dá)到初期設(shè)想。為了提高模型預(yù)測(cè)的準(zhǔn)確性，分別采用衍生字段、參數(shù)調(diào)優(yōu)、分箱處理等方法對(duì)模型進(jìn)行優(yōu)化，具體如下：

衍生字段：針對(duì)原數(shù)據(jù)，區(qū)分7個(gè)來(lái)源表的投訴數(shù)據(jù)，衍生投訴來(lái)源字段，如是否來(lái)電原因。衍生服務(wù)請(qǐng)求級(jí)別字段，對(duì)其細(xì)化分類(lèi)。

參數(shù)調(diào)優(yōu)：根據(jù)字段細(xì)分結(jié)果，進(jìn)一步優(yōu)化衍生投訴類(lèi)行為數(shù)據(jù)，如計(jì)算當(dāng)前受理號(hào)碼歷史升級(jí)投訴次數(shù)等，對(duì)模型剪枝（75～80），增加模型預(yù)測(cè)錯(cuò)誤成本。

分箱處理：對(duì)數(shù)值型變量進(jìn)行分箱處理。

最后通過(guò)增加客戶消費(fèi)行為數(shù)據(jù)，對(duì)數(shù)值型數(shù)據(jù)分箱處理，采用C5.0算法建立模型，模型命中率提高為78%。

5）模型效果評(píng)估

判斷一個(gè)模型是否可接受，需要考察該模型對(duì)數(shù)據(jù)集的分類(lèi)效果，其中重要的檢測(cè)指標(biāo)是準(zhǔn)確率、命中率和覆蓋率。C5.0模型的結(jié)果可以通過(guò)分析節(jié)點(diǎn)，以輸出矩陣的方式展現(xiàn)，模型結(jié)果還可以輸出字段重要性的排名。根據(jù)模型訓(xùn)練結(jié)果，總體上能夠有效地預(yù)測(cè)產(chǎn)生升級(jí)投訴的客戶及原因，強(qiáng)有力地控制兩條紅線處于合理的區(qū)間。

6）模型部署

將構(gòu)建好的模型導(dǎo)出為SQL（Structured Query Language，結(jié)構(gòu)化查詢語(yǔ)言）或PMML（Predictive Model Markup Language，預(yù)言模型標(biāo)記語(yǔ)言）；將SQL或PMML嵌入腳本，定時(shí)執(zhí)行腳本生成名單后派送。

4 結(jié)束語(yǔ)

本文基于大數(shù)據(jù)工具，利用客戶投訴數(shù)據(jù)建立模型，構(gòu)建了智能化的投訴信息挖掘平臺(tái)。通過(guò)模型可以加強(qiáng)升級(jí)投訴預(yù)防工作，在降低客戶投訴升級(jí)的同時(shí)提高客戶滿意度，并控制了兩條紅線，使得兩條紅線指標(biāo)呈現(xiàn)良性化趨勢(shì)。系統(tǒng)智能化集成簡(jiǎn)化了成熟的投訴處理流程，使得客戶投訴問(wèn)題的解決更加快捷和準(zhǔn)確，節(jié)約了大量的人力資源，從而有效地降低了投訴處理成本。并且通過(guò)建?？梢詮耐对V信息中挖掘隱含的客戶需求和商機(jī)，進(jìn)而獲得服務(wù)及產(chǎn)品改進(jìn)和創(chuàng)新思路的方法。

參考文獻(xiàn)

[1] 薛薇，陳歡歌. 基于Clementine的數(shù)據(jù)挖掘[M]. 北京： 中國(guó)人民大學(xué)出版社， 2012.

[2] 周志華. 機(jī)器學(xué)習(xí)[M]. 北京： 清華大學(xué)出版社， 2016.

[3] 陸富琪. 電信增值業(yè)務(wù)及其發(fā)展模式分析[J]. 信息網(wǎng)絡(luò)， 2004（3）： 21-24.

[4] 盛朕業(yè)，才鳳艷. 顧客忠誠(chéng)的內(nèi)涵及價(jià)值衡量[J]. 商業(yè)時(shí)代， 2006（25）： 35-36.

[5] 郭麗麗，丁世飛. 深度學(xué)習(xí)研究進(jìn)展[J]. 計(jì)算機(jī)科學(xué)， 2015（5）： 28-33.

[6] 左超，耿慶鵬，劉旭峰. 基于大數(shù)據(jù)的電信業(yè)務(wù)發(fā)展策略研究[J]. 郵電設(shè)計(jì)技術(shù)， 2013（10）： 1-4.

[7] 羅芳，李志亮. 基于分類(lèi)的機(jī)器學(xué)習(xí)方法中的決策樹(shù)算法[J]. 寧德師專(zhuān)學(xué)報(bào)： 自然科學(xué)版， 2009（1）： 40-42.

[8] 季桂樹(shù)，陳沛玲，宋航. 決策樹(shù)分類(lèi)算法研究綜述[J]. 科技廣場(chǎng)， 2007（1）： 9-12.

[9] 丁俊民，廖振松. 基于大數(shù)據(jù)建模的投訴預(yù)測(cè)與應(yīng)用[J]. 信息通信， 2015（9）： 291-292.

[10] 董智純，楊林，詹念武，等. 一種基于大數(shù)據(jù)技術(shù)的投訴分析與預(yù)測(cè)系統(tǒng)[J]. 信息通信， 2015（9）： 285-286.

[11] 周文杰，楊璐，嚴(yán)建峰. 大數(shù)據(jù)驅(qū)動(dòng)的投訴預(yù)測(cè)模型[J]. 計(jì)算機(jī)科學(xué)， 2016（7）： 217-223.