無線網(wǎng)絡(luò)優(yōu)化智能管理平臺是為運營商打造的一套綜合性的日常無線優(yōu)化工作支撐平臺,功能涵蓋了網(wǎng)絡(luò)集中化管理手段、網(wǎng)絡(luò)全生命周期監(jiān)控、網(wǎng)絡(luò)質(zhì)量及服務(wù)能力評估、網(wǎng)優(yōu)日常工作管理、網(wǎng)優(yōu)APP等功能,可實現(xiàn)網(wǎng)優(yōu)工作規(guī)范化、流程化閉環(huán)管理。
網(wǎng)絡(luò)優(yōu)化綜合管理平臺采用三層架構(gòu)建設(shè),分為采集層、共享層和應(yīng)用層。采集層主要是底層數(shù)據(jù)的收集工作,共享層用于報表計算、結(jié)果存儲,向應(yīng)用層提供數(shù)據(jù)支撐;應(yīng)用層為各類網(wǎng)優(yōu)應(yīng)用系統(tǒng)。
網(wǎng)絡(luò)優(yōu)化智能管理平臺包含了2G/4G/5G性能、參數(shù)、告警、MR的全量數(shù)據(jù),實現(xiàn)了網(wǎng)絡(luò)及用戶感知指標(biāo)的監(jiān)控與展現(xiàn),支持不同維度數(shù)據(jù)分析與提取。支撐運營商日常優(yōu)化、結(jié)構(gòu)優(yōu)化分析、日??己说裙ぷ?。實現(xiàn)集中規(guī)劃、集中優(yōu)化、集中投訴、集中參數(shù)、集中故障類管理流程工作。
1)網(wǎng)優(yōu)集中化支撐
網(wǎng)優(yōu)集中優(yōu)化支撐包括:集中規(guī)劃、集中分析、集中參數(shù)以及其他協(xié)同管理系統(tǒng),可全面管理網(wǎng)優(yōu)日常工作。
2)網(wǎng)絡(luò)質(zhì)量分析專題
?? 網(wǎng)絡(luò)質(zhì)量分析專題可以從網(wǎng)絡(luò)質(zhì)量、網(wǎng)絡(luò)結(jié)構(gòu)、干擾分析等方面進(jìn)行多維度分析,進(jìn)而提升運營商的網(wǎng)絡(luò)運維支撐手段。
3、BI報表支撐
BI級報表支撐可實現(xiàn)網(wǎng)絡(luò)性能、參數(shù)、告警、干擾、MR等數(shù)據(jù)的即席查詢或匯總分析。
4、GIS支撐
?? GIS支撐可以實現(xiàn)所有業(yè)務(wù)情況,業(yè)務(wù)分布,用戶分布的地理化呈現(xiàn);支持多業(yè)務(wù)場景,多維度渲染分析。
多網(wǎng)協(xié)作節(jié)能系統(tǒng)基于運營商2/4/5G無線網(wǎng)絡(luò)的性能指標(biāo)、參數(shù)配置、告警信息、MR測量及基礎(chǔ)數(shù)據(jù)信息的采集,綜合分析同制式或異制式網(wǎng)絡(luò)各小區(qū)的業(yè)務(wù)負(fù)荷情況和覆蓋情況,基于內(nèi)置的配置策略和預(yù)測模型,在業(yè)務(wù)量閑時關(guān)斷部分低負(fù)荷容量小區(qū),同時確保無線網(wǎng)絡(luò)覆蓋不受影響,從而達(dá)到無線網(wǎng)絡(luò)安全可靠地節(jié)能減排的效果。
多網(wǎng)協(xié)作節(jié)能系統(tǒng)分為大數(shù)據(jù)平臺端和系統(tǒng)執(zhí)行端。大數(shù)據(jù)平臺端部署在省大數(shù)據(jù)平臺的數(shù)據(jù)應(yīng)用層,從數(shù)據(jù)共享層獲取用戶分布和網(wǎng)絡(luò)測量報告方面的數(shù)據(jù);系統(tǒng)執(zhí)行端部署在網(wǎng)管網(wǎng)內(nèi)部,與無線基站、基站控制器和運維中心保持連接,大數(shù)據(jù)平臺端和系統(tǒng)執(zhí)行端之間會適時進(jìn)行雙向信息交互。
多網(wǎng)協(xié)作節(jié)能系統(tǒng)根據(jù)同制式或異制式鄰區(qū)的重疊覆蓋度和業(yè)務(wù)負(fù)荷能力評估,在業(yè)務(wù)閑時關(guān)閉低負(fù)荷小區(qū),實現(xiàn)多場景的節(jié)能減排。
采集模塊自動采集5G/LTE/GSM跨網(wǎng)絡(luò)跨設(shè)備性能指標(biāo)、參數(shù)配置、告警信息以及MR測量報告等海量數(shù)據(jù)。
策略模塊根據(jù)各網(wǎng)絡(luò)小區(qū)歷史和實時業(yè)務(wù)負(fù)荷承載情況,創(chuàng)建精確的業(yè)務(wù)預(yù)測模型。根據(jù)多網(wǎng)小區(qū)的重疊覆蓋度和業(yè)務(wù)模型計算篩選節(jié)能小區(qū)和對應(yīng)的補償小區(qū),生成最優(yōu)的節(jié)能解決方案。針對不同主設(shè)備特性,自動執(zhí)行協(xié)作節(jié)能方案。
系統(tǒng)實現(xiàn)5G/LTE/GSM補償小區(qū)最小15分鐘粒度實時業(yè)務(wù)監(jiān)控,對補償小區(qū)告警和業(yè)務(wù)負(fù)荷超門限及時定位并立即喚醒對應(yīng)的節(jié)能小區(qū),可靠的保障網(wǎng)絡(luò)的安全性能。針對未喚醒的異常小區(qū)進(jìn)行短信通知、郵件通知。同時系統(tǒng)采集了各主設(shè)備廠家的節(jié)能功能開啟情況,如符號關(guān)斷、通道關(guān)斷、載波關(guān)斷、亞幀關(guān)斷、深度休眠等,綜合統(tǒng)計不同制式、不同廠家、不同節(jié)能手段,通過一套平臺可以掌握所有節(jié)能功能開啟情況,為精細(xì)化節(jié)能策略提供基礎(chǔ)數(shù)據(jù),更有效的智能節(jié)電,在保證用戶體驗的前提下,充分挖掘無線網(wǎng)絡(luò)的節(jié)能潛力。
]]>
本系統(tǒng)可以實現(xiàn)對移動互聯(lián)網(wǎng)用戶和固網(wǎng)用戶的上下行內(nèi)容進(jìn)行實時采集和監(jiān)測。根據(jù)篩選準(zhǔn)則,對用戶訪問的圖片和文字的內(nèi)容自動審核(即自動識別),判斷其是否為疑似不良內(nèi)容。自動審核篩選出來的疑似不良內(nèi)容,必須再經(jīng)過人工審核后,才能最終判定是否為不良內(nèi)容。對于人工審核判定為不良內(nèi)容的網(wǎng)站域名需生成相應(yīng)的封堵黑名單,發(fā)送到封堵設(shè)備(域名管控系統(tǒng))進(jìn)行封堵。
本系統(tǒng)由網(wǎng)絡(luò)內(nèi)容監(jiān)測前端機、內(nèi)容識別服務(wù)器、中心處理服務(wù)器等組成。前端機采用數(shù)據(jù)旁路方式接入被監(jiān)測鏈路,采集還原出鏈路數(shù)據(jù)中的圖像和文本數(shù)據(jù),同時對圖像和文本數(shù)據(jù)進(jìn)行去重。內(nèi)容識別服務(wù)器是對前端機傳輸過來的圖像和文本數(shù)據(jù)進(jìn)行識別,并將中標(biāo)的圖像和文本數(shù)據(jù)上傳到中心處理服務(wù)器。應(yīng)用服務(wù)器完成監(jiān)測功能配置、數(shù)據(jù)統(tǒng)計分析、監(jiān)測記錄存儲、人工二次審核等功能。
可以識別的圖片格式包括JPEG、JPG、PNG、TIFF、JBIG、JPEG-2000、RAW、PNM、PPM、PGM、RAS、MNG、BMP、GIF、ICO、TGA、PCX、WBMP、WMF、SKA、SVG、其中“WBMP、TIFF、SVG ”為生僻格式,識別能力為業(yè)界領(lǐng)先。
對于特定圖片可以采用樣例庫圖片分析技術(shù),即由用戶手工在樣例庫中添加該圖片,系統(tǒng)通過先進(jìn)的圖片摘要技術(shù)可以自動的識別任何與該樣例庫圖片特征相符的圖片。
在下列條件下,分析識別的準(zhǔn)確率可以超過90%:
明暗亮度修改在50%以內(nèi);
按比例放大縮小在300%以內(nèi);
不按比例拉伸在300%以內(nèi);
在原圖的基礎(chǔ)上增加或刪除不超過30%的內(nèi)容。
對于和其他圖片疊加、覆蓋以及重復(fù)曝光的情況下,系統(tǒng)的摘要算法同樣可以高效的進(jìn)行分析。在樣例庫圖片保留明顯的原有特征的情況下,識別準(zhǔn)確率可以超過90%。
系統(tǒng)創(chuàng)新性地采用了“基于內(nèi)容的圖像識別技術(shù)”,建立了人工智能的圖像識別數(shù)學(xué)模型,根據(jù)標(biāo)準(zhǔn)膚色、姿態(tài)特征庫直接對圖像進(jìn)行判斷,而不是和現(xiàn)有圖像庫進(jìn)行簡單的對比,對色情圖像的識別率大于90%,成功實現(xiàn)了變被動防御狀態(tài)為真正主動過濾,極大地提高了過濾的有效性。
黃色圖片識別關(guān)鍵技術(shù)-視覺指紋識別技術(shù):視覺指紋識別技術(shù)為客戶端提供了自動甄別圖片和視頻內(nèi)容的方法。系統(tǒng)每天能甄別上千萬張圖片或數(shù)萬小時視頻。視覺指紋識別技術(shù)使用細(xì)微而致密的視覺指紋,從每一個圖片/幀中提取出幾百個指紋。
針對彩信圖片中的文字信息,進(jìn)行文字提取和識別,以確認(rèn)圖片內(nèi)容是否合法,其中OCR識別技術(shù)針對文字顏色單一,大小不固定,背景不固定等因素影響的情況下,可以支持以下性能:
支持目前各種主流的字體;
支持橫幅、圖片文字識別;
識別率90%左右。
對于特定視頻可以采用樣例庫視頻分析技術(shù),即由用戶手工在樣例庫中添加該視頻,系統(tǒng)通過先進(jìn)的視頻摘要技術(shù)可以自動的識別任何與該樣例庫視頻特征相符的視頻。分析識別的準(zhǔn)確率可以超過99%。
為了實現(xiàn)對視頻文件的識別,首先需要做的就是對視頻文件進(jìn)行分幀,也就是把一段視頻文件切割成許多圖片,然后對這些切割出來的圖片進(jìn)行內(nèi)容判別,從而識別出視頻中是否包括淫穢的內(nèi)容,實現(xiàn)對視頻進(jìn)行監(jiān)控的功能。
基于FFmpeg的AVbin庫可以解析大多數(shù)視頻文件(AVI、MPG、MPEG、DAT、RA、RM、RMVB、MOV、QT、ASF、WMV、FLV、MP4、WAV、SWF、DV、KMVC、AMV、ZMBV、MJPEG),為業(yè)界領(lǐng)先。Pyglet模塊可以對視頻進(jìn)行抽取,PIL模塊可以對圖片進(jìn)行處理。
黃色視頻識別,采用的是敏感視頻識別算法(Sensitive Video Recognition),并結(jié)合基于靜態(tài)內(nèi)容和視頻動態(tài)性的技術(shù),實現(xiàn)針對視頻幀集的敏感/正常視頻的識別與判定。該方法有如下特點:
利用視頻幀內(nèi)容的顏色、紋理、形狀和姿態(tài)特性,識別精確度高;
快速識別策略大大縮短幀和視頻的識別時間,識別速度快;
利用視頻幀動態(tài)特性和敏感幀的連續(xù)性,針對性強;
可以通過預(yù)設(shè)圖片(商標(biāo)、旗幟、特定標(biāo)志、物件等)查找包含這些預(yù)設(shè)內(nèi)容的圖片及視頻。
3.4 多媒體監(jiān)控告警模塊:
發(fā)現(xiàn)疑似非法圖片記錄監(jiān)控、智能識別非法圖片、疑似非法視頻記錄、智能識別非法視頻、智能識別非法文字信息、人工審核視頻和圖片等信息后產(chǎn)生告警。
3.5 不良信息黑名單模塊:
該模塊記錄聯(lián)動相關(guān)設(shè)置產(chǎn)生的黑白名單,可以針對域名進(jìn)行過濾查詢。當(dāng)啟用聯(lián)動此非法信息數(shù)據(jù)內(nèi)容與防火墻黑、白名單模塊數(shù)據(jù)一致。
3.6 日常巡檢模塊:
包括阻斷域名個數(shù)、信任域名個數(shù)、阻斷URL個數(shù)、新增數(shù)據(jù)柱狀圖、一周內(nèi)的阻斷總次數(shù)曲線圖、一周內(nèi)的關(guān)鍵詞命中次數(shù)總和曲線圖。
3.7 關(guān)鍵詞掃描模塊:
包含關(guān)鍵字掃描統(tǒng)計、域名掃描統(tǒng)計、域名關(guān)鍵字掃描統(tǒng)計、疑似非法關(guān)鍵詞記錄、語義識別合法記錄、語義識別非法記錄、審核記錄、關(guān)鍵字管理、信息檢索等功能。
3.8 域名備案模塊:
包含備案檢查、未備案記錄、已備案記錄、待查詢、ip域名統(tǒng)計域名備案審核、可疑主機列表等功能。
3.9 域名規(guī)則管理模塊:
信任域名、阻斷域名、阻斷UR、阻斷日志、阻斷設(shè)置。
3.10 報表統(tǒng)計模塊:
關(guān)鍵詞統(tǒng)計、圖片統(tǒng)計、視頻統(tǒng)計、阻斷統(tǒng)計以及各種日志。
4.1 靈活高效的檢測
系統(tǒng)引擎采用框架加檢測插件的架構(gòu),在結(jié)構(gòu)上保證了檢測的靈活性和高效性。在應(yīng)用中,用戶可根據(jù)自身的網(wǎng)絡(luò)特征和業(yè)務(wù)特征加載或預(yù)設(shè)最適當(dāng)檢測插件。
根據(jù)多種模式信息(膚色/姿態(tài)/外形/圖像信息熵等)進(jìn)行綜合判斷,極大地提高識別準(zhǔn)確率(>90%)
4.2 強大的處理性能
系統(tǒng)在設(shè)計時選用高性能硬件平臺,同時優(yōu)化計算引擎的底層算法,從而使得流量分析系統(tǒng)的處理性能最高可以達(dá)到每秒處理8萬條流記錄(flow)的能力,能夠完全滿足各種網(wǎng)絡(luò)的流量分析監(jiān)測要求。
4.3 自適應(yīng)學(xué)習(xí)
采用了向量機(SVM)分類器和最近鄰(NN) 分類器的領(lǐng)先算法,使識別速度得到極大的提升;
系統(tǒng)具有自學(xué)習(xí)的算法;
當(dāng)處理樣本增多時,系統(tǒng)可以進(jìn)行自適應(yīng)學(xué)習(xí),不斷提高識別率。
4.4 大型規(guī)?;瘧?yīng)用
成功實現(xiàn)了萬兆(10G)以上流量的實時采集監(jiān)測能力。
]]>MR智能分析平臺是集合了無線網(wǎng)絡(luò)MR測量報告、業(yè)務(wù)感知、多類精準(zhǔn)定位數(shù)據(jù)源的采集解析、計算處理為一體的網(wǎng)絡(luò)優(yōu)化深化分析支撐系統(tǒng),平臺包含無線覆蓋質(zhì)量,精細(xì)柵格化,樓宇化質(zhì)量分析,網(wǎng)絡(luò)結(jié)構(gòu)分析等全面的生產(chǎn)落地專題,是運營商網(wǎng)絡(luò)運維領(lǐng)域重要的生產(chǎn)支撐平臺。
基于規(guī)范完整的數(shù)據(jù)處理架構(gòu),集數(shù)據(jù)采集解析定位于一體,基于元數(shù)據(jù)配置管理的hadoop環(huán)境實現(xiàn)用戶/網(wǎng)絡(luò)特性建模和大數(shù)據(jù)分析決策,采用共享數(shù)據(jù)結(jié)構(gòu)模型支持應(yīng)用快速迭代。
1)基礎(chǔ)能力:
? 2)平臺創(chuàng)新能力:
1、室內(nèi)環(huán)境”全民”測試:
通過大數(shù)據(jù)算法將用戶位置模型化,根據(jù)用戶觸發(fā)不同的“定位信令標(biāo)識”數(shù)據(jù),分別使用不同的算法進(jìn)行用戶常駐位置指紋創(chuàng)建,從而讓用戶“變身”為常駐樓宇內(nèi)的測試員
2、“511”用戶感知體驗”智慧洞察”:
充分挖掘多接口信令數(shù)據(jù)特點,進(jìn)行四大環(huán)節(jié)創(chuàng)新,利用有限資源建立了無線網(wǎng)絡(luò)的用戶全面感知分析系統(tǒng)。
3、智能重要場景識別:
挖掘用戶網(wǎng)絡(luò)特性的相關(guān)特征,基于不同特征用戶群體的遷移變化,采用大數(shù)據(jù)智能學(xué)習(xí)算法,實現(xiàn)場景的精細(xì)化識別。
4、“高層“用戶分層識別
基于用戶網(wǎng)絡(luò)特征模型建立,結(jié)合家寬、掌廳wifi指紋、MDT、集客信息等精準(zhǔn)定位信息,完成網(wǎng)絡(luò)特征模型與樓宇及樓層精準(zhǔn)位置信息的準(zhǔn)確匹配。根據(jù)用戶進(jìn)出電梯等特定行為歷時,借助大數(shù)據(jù)挖掘算法,實現(xiàn)樓宇分層指紋庫的智能學(xué)習(xí)及擴充。
?
基于Hadoop/Spark大數(shù)據(jù)處理平臺,根據(jù)不同模塊的功能以及數(shù)據(jù)差別,采用不同的技術(shù)進(jìn)行功能實現(xiàn),包括:SparkSQL、HBase、GIS、柵格、FTP技術(shù),socket技術(shù)等。為5G網(wǎng)絡(luò)優(yōu)化提供敏捷、集中、自動、智能的運營基礎(chǔ)能力,通過構(gòu)建網(wǎng)絡(luò)一體化,實現(xiàn)數(shù)據(jù)應(yīng)用統(tǒng)一訪問、業(yè)務(wù)流程全景監(jiān)控、服務(wù)能力便捷操作、端到端協(xié)同自動運維與優(yōu)化。
該模塊主要使用4G DPI、5G DPI、Trace數(shù)據(jù)、MRO數(shù)據(jù)、PM數(shù)據(jù)、CDR數(shù)據(jù),完成用戶5G呼叫單據(jù)生成、5G呼叫記錄查詢、5G用戶4G聯(lián)合分析功能。
該模塊主要使用5G MRO數(shù)據(jù),經(jīng)過對數(shù)據(jù)的清洗加工,入庫,指標(biāo)提取等工作,完成基于MR的覆蓋類指標(biāo)分析,涉及到的相關(guān)指標(biāo)主要有弱覆蓋指標(biāo)、過覆蓋指標(biāo)、重疊覆蓋指標(biāo);同時完成小區(qū)、場景區(qū)域、地市級,升級,全國級的指標(biāo)呈現(xiàn)和覆蓋的GIS呈現(xiàn)。
網(wǎng)絡(luò)質(zhì)量洞察功能主要是借助4GMRO數(shù)據(jù)、5G MRO數(shù)據(jù),5G PM數(shù)據(jù)、5G CM數(shù)據(jù)、告警數(shù)據(jù)、路測數(shù)據(jù)等,完成4/5G覆蓋對比,5G網(wǎng)絡(luò)的質(zhì)量的評價,網(wǎng)絡(luò)異常的檢測,路測分析,并通過5G全網(wǎng)質(zhì)量視圖的形式對分析結(jié)果進(jìn)行呈現(xiàn)。
支持多數(shù)據(jù)標(biāo)準(zhǔn)接口,支持TAB,SHP等地圖數(shù)據(jù)文件格式輸入,已經(jīng)基于江蘇移動使用的SYBASE數(shù)據(jù)庫集群,采用文件轉(zhuǎn)換模式實現(xiàn)大類渲染預(yù)處理技術(shù)。
采用動態(tài)影像處理服務(wù):文件集群式存儲,在高I/O的SSD或內(nèi)存空間創(chuàng)建動態(tài)調(diào)用服務(wù),實現(xiàn)高性能渲染讀取,比現(xiàn)有單機化GIS提升4倍以上的渲染效率。
使用5G AGPSMR數(shù)據(jù)、5G PM數(shù)據(jù)、5G CM數(shù)據(jù)完成相關(guān)異常小區(qū)的判斷,如:經(jīng)緯度異常小區(qū)、方位角異常小區(qū)、 5G缺失小區(qū)判斷、 5G冗余小區(qū)判斷。
統(tǒng)一DPI系統(tǒng)作為大數(shù)據(jù)采集的分布式探針可以擷取各個網(wǎng)絡(luò)節(jié)點的上網(wǎng)數(shù)據(jù),通過大數(shù)據(jù)處理可以實現(xiàn)復(fù)雜的關(guān)聯(lián)分析和流量建模,進(jìn)行路由和質(zhì)量分析。統(tǒng)一DPI系統(tǒng)可以與用戶行為分析、信息推送、安全審計、內(nèi)容計費、CDN、WebCache、P2PCache、不良網(wǎng)站檢測、DDoS 檢測、流量清洗、僵木蠕和病毒防御等系統(tǒng)共享信息,基于用戶和業(yè)務(wù)特性的過濾和鏡像能力,通過報文數(shù)據(jù)和日志數(shù)據(jù)的方式與第三方系統(tǒng)進(jìn)行集成和關(guān)聯(lián),大幅降低后端應(yīng)用系統(tǒng)的處理性能壓力,也可以支持?jǐn)?shù)據(jù)中心和內(nèi)容服務(wù)商的定制化采集接口。
系統(tǒng)采用國內(nèi)流行的、電信業(yè)標(biāo)準(zhǔn)化的三層松耦合架構(gòu)設(shè)計,模塊擴展性強,維護(hù)性好,支持移網(wǎng)用戶面(Gn、S11-U、S1-U)、移網(wǎng)信令面(S1-MME、S6a等接口),固網(wǎng)(城域網(wǎng)、Radius(含nat日志信息)等接口)原始碼流的采集。
(1)識別功能
包括:應(yīng)用識別、應(yīng)用動作識別、自定義應(yīng)用識別、多協(xié)議識別、隧道流量識別。
(2)網(wǎng)管功能
通過SNMP的形式向數(shù)據(jù)網(wǎng)管系統(tǒng)發(fā)送資源配置信息。
(3)接口功能
包括:策略接口、文件接口、數(shù)據(jù)接口。
(4)復(fù)用功能
包括:原始報文鏡像復(fù)用、分光復(fù)用、會話級數(shù)據(jù)復(fù)用、統(tǒng)計級數(shù)據(jù)復(fù)用。
(5)安全功能
包括:DDoS檢測、文本/圖片還原、IDC信息安全功能。
(6)控制功能
包括:串接模式下的控制功能、并接模式下的控制功能、黑白名單、不同業(yè)務(wù)/應(yīng)用控制策略、流量封堵功能、推送功能。
(7)分析統(tǒng)計
包括:通用流量統(tǒng)計、流量流向分析和統(tǒng)計、網(wǎng)站分析統(tǒng)計、XDR話單(日志)。
(8)其他功能
主要有:回填功能、非對稱流量歸并、策略管理、數(shù)據(jù)回放等。
基于DPI技術(shù)及DFI技術(shù)對常見的協(xié)議、應(yīng)用進(jìn)行識別,目前支持22大類、3200多種小類的應(yīng)用識別以及41類主流互聯(lián)網(wǎng)協(xié)議識別;并可提升至應(yīng)用功能和應(yīng)用元數(shù)據(jù)級別,深度了解用戶應(yīng)用訪問行為,了解用戶真實業(yè)務(wù)動作,發(fā)現(xiàn)用戶實際需求。
(1)凈荷特征匹配技術(shù)DPI
基于凈荷特征匹配技術(shù),通過識別數(shù)據(jù)報文中的凈荷特征來確定業(yè)務(wù)流所承載的應(yīng)用。
(2)深度流檢測技術(shù)DFI
基于流的行為特征,通過與已建立的應(yīng)用數(shù)據(jù)流的數(shù)據(jù)模型進(jìn)行比對,可以判別出該流的業(yè)務(wù)或應(yīng)用類型。
(3)行為模式識別技術(shù)
行為模式識別技術(shù)即可根據(jù)用戶已經(jīng)實施的行為,判斷用戶正在進(jìn)行的動作或者即將實施的動作。
(4)交互式業(yè)務(wù)識別技術(shù)
DPI技術(shù)首先識別出控制流,并根據(jù)控制流協(xié)議分析識別出業(yè)務(wù)流的端口或?qū)Χ司W(wǎng)關(guān)地址等信息,然后對業(yè)務(wù)流進(jìn)行解析,從而識別出相應(yīng)的業(yè)務(wù)流。
IDC流量監(jiān)測與分析系統(tǒng)通過對IDC出入口前端進(jìn)行分流、匯聚、DPI采集解析及大數(shù)據(jù)挖掘分析能識別到網(wǎng)絡(luò)中所有類型的網(wǎng)絡(luò)流量,根據(jù)特征精確識別IDC流量自有應(yīng)用和非自有應(yīng)用,對全面了解流量流向、用戶行為特征、社情民意、做好網(wǎng)絡(luò)宣傳監(jiān)管工作具有重要意義,同時也是各IDC運營企業(yè)加強網(wǎng)絡(luò)安全管理的重要工具。
(系統(tǒng)工作流程圖)
IDC流量監(jiān)測與分析系統(tǒng)主要分為兩種組網(wǎng)和部署方案,一種是并接,一種是串接。
并接部署方式是將在IDC機房核心路由器的出口處,進(jìn)行分光割接,輸送一路數(shù)據(jù)到IDC流量檢測與分析系統(tǒng)中進(jìn)行分析,系統(tǒng)與現(xiàn)網(wǎng)是旁路關(guān)系,網(wǎng)絡(luò)拓?fù)淙缦隆?img loading="lazy" class="size-full wp-image-592 aligncenter" src="http://yuhe688.com/wp-content/uploads/2020/08/微信截圖_20200821110454.png" alt="" width="486" height="288" srcset="http://yuhe688.com/wp-content/uploads/2020/08/微信截圖_20200821110454.png 486w, http://yuhe688.com/wp-content/uploads/2020/08/微信截圖_20200821110454-300x178.png 300w" sizes="(max-width: 486px) 100vw, 486px" />
串接部署方式是將在IDC機房核心路由器的出口處,部署bypass光保護(hù)設(shè)備,將IDC流量檢測與分析系統(tǒng)串接到現(xiàn)網(wǎng)當(dāng)中,網(wǎng)絡(luò)拓?fù)淙缦隆?img loading="lazy" class="aligncenter size-full wp-image-593" src="http://yuhe688.com/wp-content/uploads/2020/08/微信截圖_20200821110526.png" alt="" width="487" height="279" srcset="http://yuhe688.com/wp-content/uploads/2020/08/微信截圖_20200821110526.png 487w, http://yuhe688.com/wp-content/uploads/2020/08/微信截圖_20200821110526-300x172.png 300w" sizes="(max-width: 487px) 100vw, 487px" />
?
IDC流量監(jiān)測與分析系統(tǒng)同時支持基于IPv4和IPv6的應(yīng)用類型采集識別。各類應(yīng)用流量采集識別結(jié)果字段中詳細(xì)定義了不同類應(yīng)用所需識別的關(guān)鍵字段,關(guān)鍵字段滿足業(yè)界技術(shù)規(guī)范和要求。
IDC流量監(jiān)測與分析系統(tǒng)可以實現(xiàn)對特定用戶組的特定應(yīng)用進(jìn)行詳細(xì)數(shù)據(jù)采集。系統(tǒng)可監(jiān)測與分析用戶組信息和應(yīng)用信息,包括所屬BRAS、鏈路編號、流量類型、源目的IP和端口號、起始時間。
IDC流量監(jiān)測與分析系統(tǒng)持續(xù)跟蹤各種主流網(wǎng)絡(luò)應(yīng)用和其他應(yīng)用的發(fā)展和演進(jìn),形成協(xié)議采集識別的標(biāo)準(zhǔn)流程,通過采用定期或是不定期方式更新IDC流量監(jiān)測與分析系統(tǒng)應(yīng)用識別能力。IDC流量監(jiān)測與分析系統(tǒng)能夠通過系統(tǒng)升級、導(dǎo)入新的應(yīng)用特征等方式對已知應(yīng)用變種和未知應(yīng)用進(jìn)行識別。
目前支持的業(yè)務(wù)種類包括:P2P業(yè)務(wù)、VoIP業(yè)務(wù)、安全、財經(jīng)、彩信、導(dǎo)航、動漫、即時通信、瀏覽下載、其他業(yè)務(wù)、社交、視頻、音樂、應(yīng)用商店、郵箱、游戲、閱讀、支付等超過5000種。
支持對特定用戶、用戶組、全部用戶等多個維度的流量實時識別和數(shù)據(jù)采集,統(tǒng)計其在一定的時間維度內(nèi)(如5分鐘)用戶瀏覽不同網(wǎng)站類型的次數(shù),統(tǒng)計其在一些搜索網(wǎng)站的搜索關(guān)鍵詞等信息,以對用戶的偏好分析并進(jìn)行關(guān)聯(lián)信息的推送。
支持針對用戶偏好進(jìn)行信息識別分析,包括數(shù)據(jù)統(tǒng)計開始、結(jié)束時間、用戶組、用戶感興趣的網(wǎng)站類型、用戶感興趣的關(guān)鍵詞等。
支持對其他運營商利用IDC流量網(wǎng)絡(luò)資源進(jìn)行非法二次運營的行為的檢測。檢測結(jié)果括數(shù)據(jù)統(tǒng)計開始、結(jié)束時間,非法路由接入點的位置,所接入的非法用戶IP地址及所屬運營商,通過該非法路由接入點產(chǎn)生的流量等信息。
支持從特定用戶、用戶組、全部用戶等多個維度對檢測應(yīng)用層的攻擊:如TCP SYN FLOOD、ICMP攻擊、 CC攻擊、HTTP Get Flood、HTTP Post Flood、 SIP Flood、DNS Query Flood、DNS Reply Flood、Connection Flood等。檢測結(jié)果可統(tǒng)計一定周期(如5分鐘內(nèi))的攻擊開始、結(jié)束時間,被攻擊的IP地址,應(yīng)用層攻擊類型,應(yīng)用層攻擊流量,應(yīng)用層攻擊速率,攻擊源所在區(qū)域數(shù),攻擊源地址數(shù)。
支持針對網(wǎng)絡(luò)層和應(yīng)用層DDoS攻擊流量進(jìn)行限速或者進(jìn)行智能鏡像的管理方式,支持針對指定目標(biāo)地址的應(yīng)用進(jìn)行限速或者進(jìn)行流量牽引等的管理方式。
支持從AAA系統(tǒng)獲取用戶上下線的RADIUS信息,系統(tǒng)中由特定設(shè)備完成相關(guān)功能。當(dāng)網(wǎng)絡(luò)支持將RADIUS報文分光或鏡像時,設(shè)備支持監(jiān)聽模式獲取RADIUS報文中的用戶上線信息。
通過監(jiān)測用戶上下線信令所經(jīng)過的物理鏈路,檢測其中的信令交互過程,及時識別出其中的關(guān)鍵字段(必含字段:UserName、Framed-IP-Address 、NAS-IP-Address、NAS-Identifier)。
IDC流量監(jiān)測與分析系統(tǒng)符合RFC 4271-BGP4 協(xié)議中規(guī)定的支持基本BGP功能和要求。
BGP類消息包OPEN、UPDATE、KEEPALIVE、NOTIFICATION格式規(guī)定,消息包含的基本要求。支持ROUTE- REFRESH 消息類型格式規(guī)定。
支持BGP功能,通過BGP獲取AS和IP路由對應(yīng)關(guān)系。
支持根據(jù)需求將本地范圍的區(qū)域【靜態(tài)下發(fā)的IP地址庫對應(yīng)表的區(qū)域或BGP路由的AS號(AS組)區(qū)域】與對方范圍區(qū)域【靜態(tài)下發(fā)的IP地址庫對應(yīng)表的區(qū)域或BGP路由的AS號(AS組)區(qū)域】間,任意兩個區(qū)域間進(jìn)行流量流向的統(tǒng)計。
安全管理提供有效的控制機制,對用戶接入、訪問即時消息業(yè)務(wù)服務(wù)平臺進(jìn)行限制,確保每個合法用戶能夠正常登錄、使用已授權(quán)的軟件模塊、操作合法級別的命令,防止越權(quán)訪問的情況發(fā)生,以保障網(wǎng)絡(luò)設(shè)備的安全運行,并對系統(tǒng)中發(fā)生的認(rèn)證,授權(quán)訪問等操作進(jìn)行記賬,使操作具有不可否認(rèn)性。
系統(tǒng)將實現(xiàn)各自系統(tǒng)、組件程序的集中配置管理,對系統(tǒng)、服務(wù)程序的運行狀態(tài)進(jìn)行實時監(jiān)控,為系統(tǒng)的正常運行提供保障。
]]>基于Hadoop/Spark大數(shù)據(jù)處理平臺,利用靜態(tài)表的字典和程序自學(xué)習(xí)的庫數(shù)據(jù),對電信運營商的用戶上網(wǎng)數(shù)據(jù)進(jìn)行采集、解析、關(guān)聯(lián)、挖掘,獲取手機用戶的行為和位置信息,并在此基礎(chǔ)上結(jié)合業(yè)務(wù)目標(biāo),通過構(gòu)建相關(guān)領(lǐng)域的知識圖譜,形成用戶的行為標(biāo)簽、位置標(biāo)簽、偏好標(biāo)簽、關(guān)聯(lián)標(biāo)簽等用戶畫像體系。
基于智能語音處理技術(shù),進(jìn)行運營商客服語音交互場景下的語音轉(zhuǎn)譯,結(jié)合行業(yè)經(jīng)驗及語義理解技術(shù),對轉(zhuǎn)寫文本進(jìn)行服務(wù)規(guī)范相關(guān)業(yè)務(wù)建模,完成對非結(jié)構(gòu)化語音數(shù)據(jù)的可視化處理,滿足服務(wù)合規(guī)性質(zhì)檢與行業(yè)大數(shù)據(jù)分析和價值挖掘等需求。
通過語音質(zhì)檢進(jìn)行數(shù)據(jù)化管理,實現(xiàn)全量規(guī)范化客服服務(wù)質(zhì)檢。
通過語音轉(zhuǎn)譯實現(xiàn)客服錄音的精細(xì)化分析,挖掘客戶咨詢與投訴熱點。
滿足日常質(zhì)檢分析運營操作需求,支持基礎(chǔ)數(shù)據(jù)統(tǒng)計分析和任務(wù)管理。
客服人員服務(wù)合規(guī)率、客戶需求熱點分類等各項統(tǒng)計及分析總結(jié)。