首頁>>>技術(shù)>>>測試系統(tǒng)

軟交換性能測試技術(shù)分析

唐君 2009/10/30

摘要

  介紹了軟交換性能測試中常用的測試方法和組網(wǎng)方式,以及如何應(yīng)用各種方案測試軟交換設(shè)備不同的功能;闡述了如何利用軟交換測試中的關(guān)鍵指標(biāo)和參數(shù)分析性能測試中的結(jié)果,以及如何運(yùn)用其他各種手段,分析故障原因。

1.軟交換測試概述

  軟交換作為NGN/VoIP網(wǎng)絡(luò)中的核心設(shè)備,具有接口豐富、協(xié)議復(fù)雜、性能要求高等特點(diǎn),因此也成為設(shè)備制造商和運(yùn)營商進(jìn)行實(shí)驗(yàn)室測試或網(wǎng)絡(luò)驗(yàn)收測試的關(guān)注焦點(diǎn)。軟交換一般處于網(wǎng)絡(luò)的中心位置,與PSTN互通需要SIGTRAN接口,與中繼媒體網(wǎng)關(guān)互通需要H.248控制接口,與IP終端互通需要sip/H.323/mgcp/H.248接口,與其他軟交換互通需要sip/sip-I/sip-T/BICC接口。這其中的任何一個(gè)接口出現(xiàn)問題,都將成為制約系統(tǒng)性能的瓶頸,嚴(yán)重的時(shí)候甚至造成NGN/VoIP網(wǎng)絡(luò)癱瘓。因此,軟交換性能的高低,成為運(yùn)營商考察NGN系統(tǒng)好壞與否的關(guān)鍵指標(biāo)。

  基于上述原因,如何在一個(gè)復(fù)雜的網(wǎng)絡(luò)環(huán)境中,有效地驗(yàn)證軟交換設(shè)備的各個(gè)接口功能的性能及穩(wěn)定性,成為NGN/VoIP測試領(lǐng)域一個(gè)重要的研究課題。思博倫通信長期關(guān)注于通信領(lǐng)域的測試技術(shù),憑借強(qiáng)大的研發(fā)團(tuán)隊(duì)和多年的現(xiàn)網(wǎng)測試經(jīng)驗(yàn),為客戶提供完善的軟交換系統(tǒng)測試方案,成為運(yùn)營商和設(shè)備商N(yùn)GN領(lǐng)域測試的必然選擇。

2.軟交換常見測試方法

  軟交換作為一個(gè)復(fù)雜的核心控制設(shè)備,可供選擇的測試方法也多種多樣。常見的測試方法按不同分類方式,有以下幾種:


  下面我們對這些不同的測試方法進(jìn)行詳細(xì)介紹。

  2.1 單節(jié)點(diǎn)全包圍測試

  單節(jié)點(diǎn)全包圍測試一般用于驗(yàn)證單個(gè)設(shè)備是否存在性能瓶頸。通過測試儀表仿真該節(jié)點(diǎn)周圍的所有接口,模擬出該設(shè)備周圍的所有網(wǎng)絡(luò)環(huán)境,從而杜絕其他設(shè)備對測試環(huán)境造成的影響,精確驗(yàn)證被測設(shè)備的性能。

  圖1所示是一個(gè)對軟交換做全包圍測試的例子。儀表通過Sigtran(M2UA或者M(jìn)3UA)協(xié)議仿真信令網(wǎng)關(guān),通過H.248協(xié)議仿真中繼網(wǎng)關(guān),通過sip/H3.23/H.248/MGCP等協(xié)議仿真IP Phone,然后模擬從PSTN往IP網(wǎng)絡(luò)側(cè)的大量語音呼叫,實(shí)現(xiàn)對中間軟交換設(shè)備的性能測試。

圖:軟交換全包圍示意圖

  2.2 多個(gè)網(wǎng)元互通測試

  這種測試一般用于在一定的、可控的環(huán)境內(nèi),對由多個(gè)節(jié)點(diǎn)組成的有限系統(tǒng)做性能測試,用于發(fā)現(xiàn)各個(gè)網(wǎng)元之間的互通問題,確定在互操作過程中是否有新的性能問題引入。

  例如,運(yùn)營商在部署VoIP網(wǎng)絡(luò)時(shí),有可能會(huì)采用A廠家的軟交換和B廠家的接入網(wǎng)關(guān)設(shè)備,如何確認(rèn)這兩家的設(shè)備在一起互通時(shí)沒有性能上的問題?這時(shí)可以采用儀表仿真接入網(wǎng)關(guān)下面的模擬線終端,往網(wǎng)關(guān)和軟交換側(cè)發(fā)起呼叫,再由軟交換將呼叫路由回網(wǎng)關(guān)再到終端。通過這種方式,由儀表發(fā)起成千上萬的呼叫經(jīng)過接入網(wǎng)關(guān)和軟交換,可以有效地驗(yàn)證這兩種設(shè)備在互通的時(shí)候有沒有性能和穩(wěn)定性問題。

  2.3 端到端系統(tǒng)測試

  端到端系統(tǒng)測試一般用于對一個(gè)完整的系統(tǒng)進(jìn)行功能及性能驗(yàn)證,或針對運(yùn)營網(wǎng)絡(luò)的分布式測試。如圖2所示,一般將儀表部署于系統(tǒng)或網(wǎng)絡(luò)中的不同分支節(jié)點(diǎn),仿真系統(tǒng)中涉及的各種不同終端,然后不同終端之間發(fā)起大量的呼叫進(jìn)行測試。通過這種方式,不僅可以驗(yàn)證系統(tǒng)性能,甚至可以對網(wǎng)絡(luò)端到端的時(shí)延、網(wǎng)絡(luò)傳輸質(zhì)量進(jìn)行測試。


圖:端到端系統(tǒng)測試示意圖

  2.4 C4匯接局功能測試

  軟交換作為NGN網(wǎng)絡(luò)中的控制設(shè)備,既有匯接局的功能,也有做本地端局的功能。當(dāng)軟交換作為匯接局使用時(shí),一般是用于匯接PSTN或者長途過來的語音話務(wù),或者用于匯接其他局過來的話務(wù),因此測試匯接局功能時(shí),有以下幾種組網(wǎng)方式:

  通過儀表的E1/STM-1接口仿真PSTN端局,通過傳統(tǒng)的No.7信令發(fā)起從PSTN往VoIP側(cè)的語音呼叫(見圖3)。

圖:仿真PSTN端局測試軟交換C4功能

  通過儀表的IP接口仿真信令網(wǎng)關(guān)+中繼媒體網(wǎng)關(guān),通過Sigtran協(xié)議發(fā)起從PSTN往VoIP網(wǎng)絡(luò)的語音呼叫(見圖4)。

圖:仿真SG+TG測試軟交換C4功能

  通過儀表仿真另外一個(gè)軟交換實(shí)現(xiàn)的匯接局,通過sip-T/BICC協(xié)議發(fā)起從一個(gè)匯接局到另外一個(gè)匯接局的語音呼叫。

  這3種方案中,第1種方案在測試軟交換的同時(shí),可以驗(yàn)證SG和TG的性能。而第2和第3種方案,因?yàn)橹苯油ㄟ^IP接口仿真流量,可以實(shí)現(xiàn)非常高的性能,另外可以省去大量的E1或者STM-1線路連接的麻煩。

  2.5 C5本地端局功能測試

  當(dāng)軟交換作為NGN網(wǎng)絡(luò)中的本地端局使用時(shí),一般用于控制終端用戶的話務(wù)接續(xù),并提供各種補(bǔ)充業(yè)務(wù)。因此,測試端局功能時(shí),需要儀表通過模擬接入網(wǎng)關(guān)下的用戶或者IP終端用戶,實(shí)現(xiàn)本地話務(wù)的仿真。圖5所示,在實(shí)際測試時(shí),可以根據(jù)情況,配置基于SIP,H.323,Megaco或者M(jìn)GCP各種協(xié)議的終端設(shè)備,實(shí)現(xiàn)同種協(xié)議終端之間或者不同協(xié)議之間大話務(wù)量的呼叫測試。

圖:仿真IP終端測試軟交換C5功能

  2.6 峰值壓力測試

  峰值壓力測試一般用于驗(yàn)證被測設(shè)備在系統(tǒng)最高負(fù)荷的時(shí)候每秒能夠處理呼叫的能力,往往通過BHCA或CPS兩種指標(biāo)來考察被測設(shè)備,即系統(tǒng)每小時(shí)或每秒處理呼叫的個(gè)數(shù)。實(shí)際測試時(shí),一般通過儀表每秒鐘產(chǎn)生一定的呼叫量來精確驗(yàn)證系統(tǒng)能力,通過更改呼叫保持時(shí)間和呼叫間隔時(shí)間來調(diào)整壓力,測試時(shí)間一般超過1h,甚至達(dá)到24h或48h;呼損不能超過萬分之一。

  2.7 最大同時(shí)會(huì)話能力測試

  最大同時(shí)會(huì)話能力測試一般用于測試被測設(shè)備在某一個(gè)特定時(shí)間能夠同時(shí)保持的會(huì)話數(shù)目。相對于BHCA和CPS,最大會(huì)話保持?jǐn)?shù)也是一項(xiàng)重要的指標(biāo)。這種測試一般通過儀表仿真一定數(shù)目的呼叫,然后將呼叫保持時(shí)間設(shè)置的足夠長,觀察在一定的時(shí)間段內(nèi),這些同時(shí)保持的話務(wù)有沒有掉話、異常中斷等各種情況。體現(xiàn)在呼損數(shù)值上,不能超過萬分之一。

  2.8 穩(wěn)定性測試

  穩(wěn)定性測試一般用于驗(yàn)證系統(tǒng)長時(shí)間穩(wěn)定運(yùn)行,無故障處理話務(wù)的能力。一般通過儀表仿真占系統(tǒng)一定負(fù)荷的話務(wù)量(如系統(tǒng)最大能處理CPS的80%),然后將每個(gè)呼叫的保持時(shí)間設(shè)置為現(xiàn)網(wǎng)平均呼叫保持時(shí)間(如2~3min),要求系統(tǒng)穩(wěn)定運(yùn)行至少24h,有時(shí)甚至超過48h以上,呼損率不能超過萬分之一。

  2.9 長時(shí)間通話測試

  長時(shí)間通話測試一般用于驗(yàn)證系統(tǒng)處理超長時(shí)間通話的能力。這類測試一般不要求很高的性能,往往使用儀表仿真幾十路的語音呼叫,將每一路的呼叫保持時(shí)間設(shè)置為至少24h以上,觀察測試過程中有無掉話、異常中斷、語音異常等現(xiàn)象。另外,還會(huì)觀察軟交換對于這種超長話單產(chǎn)生的精確程度、有無話單丟失、時(shí)長計(jì)費(fèi)是否準(zhǔn)確等現(xiàn)象。

  2.10 過載保護(hù)測試

  軟交換一般都具有過載保護(hù)功能,當(dāng)話務(wù)量超過最大負(fù)荷或者系統(tǒng)CPU負(fù)荷已經(jīng)到達(dá)100%時(shí),主動(dòng)拒絕后續(xù)的呼叫,避免過量的呼叫占用系統(tǒng)資源造成系統(tǒng)癱瘓。過載保護(hù)測試用于驗(yàn)證軟交換系統(tǒng)遇到突發(fā)話務(wù)流量超過系統(tǒng)最大負(fù)荷時(shí),有效控制話務(wù),避免系統(tǒng)癱瘓的能力。這類測試一般通過儀表逐級(jí)、逐量地仿真系統(tǒng)話務(wù)負(fù)荷,例如分別仿真占系統(tǒng)80%,100%,120%的話務(wù)量,要求系統(tǒng)在80%,100%負(fù)荷的時(shí)候呼損率不應(yīng)超過萬分之一,在120%話務(wù)量的時(shí)候,可以允許有大量的呼損,但是每秒鐘成功接續(xù)的呼叫數(shù)應(yīng)該維持在系統(tǒng)可以處理的最大CPS左右,另外不能有系統(tǒng)癱瘓、板卡重啟、消息沒有響應(yīng)等現(xiàn)象發(fā)生。

  2.11 CDR準(zhǔn)確性測試

  CDR準(zhǔn)確性測試用于驗(yàn)證軟交換系統(tǒng)在處理大量呼叫的同時(shí),生成的話單的準(zhǔn)確性。一般通過儀表仿真大量的呼叫,維持一段時(shí)間(例如幾個(gè)小時(shí)以上)。然后在測試結(jié)束后,對比儀表統(tǒng)計(jì)給出的話單總數(shù)和軟交換系統(tǒng)給出的話單總數(shù),檢查軟交換有無掉話單的現(xiàn)象。一般要求話單差錯(cuò)率不能超過萬分之一。

3.關(guān)鍵參數(shù)統(tǒng)計(jì)及性能測試結(jié)果分析

  軟交換設(shè)備因?yàn)槠浣涌诙、協(xié)議豐富、性能高等原因,成為NGN測試領(lǐng)域中最為復(fù)雜的一個(gè)被測設(shè)備,因此測試涉及的統(tǒng)計(jì)指標(biāo)也多種多樣。如何從復(fù)雜的測試數(shù)據(jù)中,過濾觀察關(guān)鍵的測試參數(shù)、有效地分析性能測試結(jié)果的好壞、檢查出系統(tǒng)存在的性能瓶頸等,將是本節(jié)中我們將要探討的內(nèi)容。

  (1)BHCA/CPS/呼損率等關(guān)鍵指標(biāo)的統(tǒng)計(jì)與分析

  在軟交換性能測試中,BHCA/CPS與呼損率是兩個(gè)很重要的相互關(guān)聯(lián)的指標(biāo)。我們進(jìn)行大量的測試就是為了找出在沒有呼損或者呼損率小于規(guī)定值(如萬分之一)的時(shí)候系統(tǒng)最大能支持的BHCA/CPS。一般使用2分法去精確查找出系統(tǒng)的無故障平衡點(diǎn)。這時(shí)候如果加上軟交換系統(tǒng)的CPU和內(nèi)存占有率的觀察,則可以幫助測試人員更加方便地判斷系統(tǒng)負(fù)荷是否已經(jīng)到了瓶頸。一般隨著儀表產(chǎn)生的BHCA/CPS的逐漸增高,系統(tǒng)在接近性能瓶頸的時(shí)候,往往伴隨著CPU占有率或者內(nèi)存占有率的突然陡增,并接近最大值;如果這個(gè)時(shí)候呼損大量增加,則可以很確定地判斷是由于系統(tǒng)負(fù)荷到了瓶頸造成大量呼損而并不是由于網(wǎng)絡(luò)等其他原因。

  (2)信令時(shí)延統(tǒng)計(jì)對于性能測試的重要性

  信令時(shí)延是考察軟交換系統(tǒng)對于信令消息處理快慢程度的一項(xiàng)指標(biāo),在查找系統(tǒng)無故障平衡點(diǎn)的時(shí)候,該指標(biāo)的統(tǒng)計(jì)也是非常重要的一項(xiàng)考察內(nèi)容。對于VoIP信令來講,信令時(shí)延主要包括Response Time,Post Dial Delay,Call Setup Time,Tear Down Time幾項(xiàng)具體的指標(biāo)。   


  從終端發(fā)起呼叫建立請求消息到收到臨時(shí)響應(yīng)消息之間的時(shí)間間隔。以Sip為例,一般是指Invite消息和100 Trying消息之間的時(shí)延。


  從終端發(fā)起呼叫建立請求消息到收到振鈴響應(yīng)消息之間的間隔。如果是Sip信令,一般是指Invite消息和180 ringing消息之間的時(shí)延;如果是模擬線信令,一般是從摘機(jī)撥完號(hào)碼到收到回鈴音之間的時(shí)延。


  從終端發(fā)起呼叫建立請求消息到收到呼叫建立確認(rèn)消息之間的間隔。Sip信令中一般是指Invite消息和200 OK消息之間的時(shí)延。

  從終端發(fā)起會(huì)話釋放請求消息到收到對端拆線確認(rèn)消息之間的間隔。Sip信令中一般是指Bye消息和200 OK消息之間的時(shí)延。

  信令時(shí)延統(tǒng)計(jì)是用于判斷和分析軟交換性能的一個(gè)重要輔助手段。因?yàn)檫@些時(shí)延的統(tǒng)計(jì)指標(biāo)往往代表著用戶實(shí)際通話過程中的切身感受。例如,Post Dial Delay代表著用戶撥完號(hào)碼之后需要等多久聽到回鈴音,如果這些指標(biāo)超過標(biāo)準(zhǔn)值,則意味著軟交換的服務(wù)質(zhì)量已經(jīng)下降,此時(shí)就算系統(tǒng)能夠正常建立呼叫,呼損率為零,但是其實(shí)當(dāng)前負(fù)荷下的軟交換性能已經(jīng)不能滿足實(shí)際運(yùn)營的要求。

  運(yùn)營商和標(biāo)準(zhǔn)組織往往對于信令時(shí)延都有著相應(yīng)的規(guī)范要求,比如中國規(guī)范要求輕載情況下Post Dial Delay要小于1s,重載情況下要小于2s。因此,在確定軟交換系統(tǒng)無故障平衡點(diǎn)的同時(shí),觀察信令時(shí)延統(tǒng)計(jì)非常重要。

  圖6是一個(gè)軟交換性能測試過程中CPS和PDD指標(biāo)的統(tǒng)計(jì)示意圖。我們可以看到,一開始在CPS比較小的時(shí)候,Post Dial Delay指標(biāo)比較穩(wěn)定。當(dāng)CPS數(shù)值爬升到一定階段時(shí),Post Dial Delay開始明顯上升。當(dāng)CPS=200達(dá)到峰值時(shí),PDD=3S。我們在測試的時(shí)候如果不綜合考察各項(xiàng)指標(biāo),往往會(huì)簡單認(rèn)為該系統(tǒng)的最大CPS指標(biāo)為200。然而實(shí)際情況是,200 CPS時(shí)候的PDD指標(biāo)已經(jīng)達(dá)不到運(yùn)營要求,因此實(shí)際、合理的系統(tǒng)最大CPS應(yīng)該為PDD<2s時(shí)候的CPS值,即180 CPS左右。

圖:CPS和Post Dial Delay關(guān)系示意圖

  從這個(gè)例子我們也可以看到,綜合考察各項(xiàng)重要指標(biāo)對于性能測試分析的重要性。

  (3)故障定位分析

  當(dāng)軟交換測試碰到故障(如大量異常呼損、消息沒有響應(yīng)等問題)時(shí),我們需要有效的手段來定位分析原因,究竟是軟交換設(shè)備工作異常,還是承載網(wǎng)絡(luò)不穩(wěn)定造成消息丟失?這種情況下,我們可以采取幾種輔助定位的手段來做進(jìn)一步的分析。


  以上一節(jié)提到的CPS VS PDD的例子為例,當(dāng)系統(tǒng)負(fù)荷增加,Post Dial Delay大幅增長的時(shí)候,我們可以適當(dāng)降低話務(wù)量(例如減到原來的一半), 再觀察Post Dial Delay的統(tǒng)計(jì)值是否隨之大幅降低。如果有明顯降低,說明消息響應(yīng)緩慢確實(shí)是跟軟交換設(shè)備的話務(wù)負(fù)荷有關(guān)系;如果該值沒有明顯降低,說明消息響應(yīng)緩慢可能是跟網(wǎng)絡(luò)有關(guān)系,例如網(wǎng)絡(luò)傳輸時(shí)延過大造成消息響應(yīng)緩慢。


  在仿真呼叫發(fā)送信令及語音的同時(shí),Abacus可以測試并統(tǒng)計(jì)如下參數(shù):丟包、時(shí)延、抖動(dòng)、亂序,并且可以輸出統(tǒng)計(jì)值對應(yīng)不同時(shí)間段的圖表。當(dāng)測試碰到問題時(shí),可以通過上述這些參數(shù)的統(tǒng)計(jì),判斷網(wǎng)絡(luò)是否出現(xiàn)問題。例如,圖7所示的One Way Delay的統(tǒng)計(jì)圖可以看到,儀表統(tǒng)計(jì)到14:10和14:30的時(shí)候,分別出現(xiàn)One Way Delay大幅增長的情況,如果這時(shí)出現(xiàn)系統(tǒng)呼損的情況,我們就有理由相信系統(tǒng)的呼損很大可能是由于網(wǎng)絡(luò)原因造成。還可以結(jié)合丟包、抖動(dòng)、亂序等其他因素,綜合判斷是否問題是由于承載網(wǎng)性能不好引起的。

圖:Abacus儀表提供的One Way Delay VS time統(tǒng)計(jì)圖


  Abacus儀表在仿真呼叫的同時(shí),可以將有問題的呼叫過程中的信令全部記錄下來。另外,思博倫公司還提供一款名為Clearsight的監(jiān)控儀表,可以將流經(jīng)IP網(wǎng)絡(luò)的所有VoIP呼叫全部監(jiān)控并記錄下來。這樣,結(jié)合Abacus,Clearsight以及軟交換本身提供的信令日志功能,可以很方便地檢查并對比儀表輸出的消息日志和網(wǎng)絡(luò)上捕捉到的消息日志以及軟交換的消息日志,從而發(fā)現(xiàn)究竟錯(cuò)誤消息或者消息丟失等故障是產(chǎn)生于哪一個(gè)節(jié)點(diǎn)。

電信網(wǎng)技術(shù)



相關(guān)鏈接:
面向下一代網(wǎng)絡(luò)測試解決方案—HyperMetrics板卡系列 2009-05-06
安捷倫3G無線外場測試解決方案 2009-04-23
如何測量VOIP的語音質(zhì)量? 2008-10-08
Spirent辛小秋:VOIP方面的測試方法和經(jīng)驗(yàn) 2008-09-19
呼叫中心測試 先性能再功能 2008-09-09