項(xiàng)目背景

為了實(shí)現(xiàn)對(duì)所轄用戶的手機(jī)、數(shù)據(jù)卡、上網(wǎng)本/筆記本等終端上網(wǎng)訪問(wèn)的上下行內(nèi)容進(jìn)行實(shí)時(shí)采集和監(jiān)測(cè)，中國(guó)移動(dòng)政企分公司采購(gòu)了1套百卓流量流向分析系統(tǒng)，該流量流向分析系統(tǒng)集中部署在中國(guó)移動(dòng)國(guó)際信息港公有云上，元數(shù)據(jù)主要來(lái)自南方基地公有云、國(guó)際信息港IDC、國(guó)際信息港CMNet機(jī)房、北京三臺(tái)機(jī)房、信息港公有云5個(gè)機(jī)房出口統(tǒng)一DPI的數(shù)據(jù)。本期工程由信息港公有云和信息港IDC提供所需云平臺(tái)資源和物理服務(wù)器，所需通用服務(wù)器、存儲(chǔ)及網(wǎng)絡(luò)設(shè)備由中國(guó)移動(dòng)集采或利舊；方案完全兼容中國(guó)移動(dòng)公有云資源池和集采的硬件設(shè)備。

解決方案

一、系統(tǒng)概述

本次流量流向分析系統(tǒng)采用Hadoop分布式文件系統(tǒng)(HDFS)，通過(guò)獲取統(tǒng)一DPI提供的會(huì)話級(jí)數(shù)據(jù)（XDR話單）和統(tǒng)計(jì)級(jí)數(shù)據(jù)進(jìn)行話單關(guān)聯(lián)、合成、分析實(shí)現(xiàn)客戶流量流向分析，流量計(jì)費(fèi)數(shù)據(jù)采集和展示，IDC客戶流量分析、流量控制等功能。

二、系統(tǒng)架構(gòu)

流量流向分析系統(tǒng)架構(gòu)主要由日志采集系統(tǒng)、數(shù)據(jù)解析處理模塊、功能分析模塊、應(yīng)用展示模塊等功能模塊組成，系統(tǒng)軟件架構(gòu)如下圖所示：

三、系統(tǒng)功能

1．流量流向分析

刻畫流量的運(yùn)營(yíng)商來(lái)源和區(qū)域分布，以及各流向內(nèi)的流量應(yīng)用構(gòu)成等；支持排名分析、趨勢(shì)分析、對(duì)比分析、多維分析等。

流量流向分析業(yè)務(wù)流量全程可視，包括區(qū)域流向、運(yùn)營(yíng)商分布、流量的應(yīng)用構(gòu)成等。

流量流向分析展示方式多樣，提供GIS地圖展示功能，支持餅圖、柱圖、曲線圖、表格等方式，并支持圖表切換，統(tǒng)計(jì)結(jié)果支持導(dǎo)出功能。

流量流向分析統(tǒng)計(jì)對(duì)象維度多樣，包括整體、IDC機(jī)房、IDC客戶、IDCIP、SP等。

流量流向分析統(tǒng)計(jì)時(shí)間粒度支持小時(shí)、天、周、月。

流量流向分析支持排名分析、趨勢(shì)分析、對(duì)比分析、多維關(guān)聯(lián)分析，支持多級(jí)鉆取查看詳細(xì)信息功能。

2. 應(yīng)用分析

刻畫整體流量的應(yīng)用分布情況，包括業(yè)務(wù)大類、業(yè)務(wù)小類等，以及各應(yīng)用在各區(qū)域的流量構(gòu)成等；支持排名分析、趨勢(shì)分析、對(duì)比分析、多維分析等。

針對(duì)IDC流量進(jìn)行應(yīng)用分析，支持應(yīng)用（大類）和子應(yīng)用（小類）的流量統(tǒng)計(jì)和訪問(wèn)次數(shù)/用戶數(shù)量統(tǒng)計(jì)。

支持根據(jù)會(huì)話級(jí)XDR數(shù)據(jù)和業(yè)務(wù)流量統(tǒng)計(jì)級(jí)數(shù)據(jù)進(jìn)行分析。

3. 業(yè)務(wù)質(zhì)量分析

業(yè)務(wù)質(zhì)量分析主要目的是對(duì)網(wǎng)絡(luò)的性能狀況進(jìn)行檢測(cè)，包括響應(yīng)延遲、業(yè)務(wù)加載延遲、重傳次數(shù)等，并給出性能指標(biāo)，針對(duì)網(wǎng)絡(luò)視頻、網(wǎng)頁(yè)瀏覽、網(wǎng)絡(luò)游戲、IM等進(jìn)行分析。

4. 熱點(diǎn)分析統(tǒng)計(jì)

熱點(diǎn)分析提供熱點(diǎn)網(wǎng)站、熱點(diǎn)應(yīng)用、熱點(diǎn)服務(wù)器TOPN排名，分析內(nèi)容包括流量、點(diǎn)擊量、訪問(wèn)用戶數(shù)等。并提供熱點(diǎn)網(wǎng)站、熱點(diǎn)應(yīng)用的趨勢(shì)分析。

5.  IDC計(jì)費(fèi)分析

支持針對(duì)單個(gè)IDC客戶實(shí)現(xiàn)95計(jì)費(fèi)功能，提供95計(jì)費(fèi)詳單查詢，并生成95計(jì)費(fèi)報(bào)表。IDC客戶流量明細(xì)話單的生成周期可配置（周或者月），支持至少保存6個(gè)月的流量統(tǒng)計(jì)記錄。

6. 流控功能

流量流向分析系統(tǒng)可生成流量控制策略策略，通過(guò)向統(tǒng)一DPI設(shè)備下發(fā)流量管理策略，以實(shí)現(xiàn)流量、訪問(wèn)控制及帶寬保障功能。

方案優(yōu)勢(shì)

1.流量可視化

以可視化的方式呈現(xiàn)，幫助管理人員全面掌握網(wǎng)絡(luò)中各節(jié)點(diǎn)、各服務(wù)器的流量成分，讓網(wǎng)絡(luò)管理、營(yíng)銷工作有據(jù)可循。

2.流量流向分析

及時(shí)發(fā)現(xiàn)網(wǎng)絡(luò)中服務(wù)器是否存在大量跨區(qū)域、跨網(wǎng)流量，減少網(wǎng)間結(jié)算成本，杜絕收支倒掛的現(xiàn)象發(fā)生。

3.熱點(diǎn)資源分析

可以有效評(píng)估CDN資源的引入是否達(dá)到預(yù)期的流量本網(wǎng)率指標(biāo)要求，為CDN業(yè)務(wù)的持續(xù)優(yōu)化提供依據(jù)。

4.業(yè)務(wù)質(zhì)量分析

通過(guò)建立質(zhì)量分析模型，監(jiān)控?zé)狳c(diǎn)資源、熱點(diǎn)ICP及其分發(fā)網(wǎng)絡(luò)的質(zhì)量狀態(tài)，基于知識(shí)庫(kù)分析質(zhì)差原因給出改進(jìn)措施，有效保障服務(wù)質(zhì)量。

5.CDN計(jì)費(fèi)分析

支持針對(duì)單個(gè)IDC客戶實(shí)現(xiàn)95計(jì)費(fèi)功能，提供95計(jì)費(fèi)詳單查詢并生成95計(jì)費(fèi)報(bào)表，大大提高了客戶的工作效率。