1、什么是Pylot?
Pylot是一個免費(fèi)的開源工具,用于測試Web服務(wù)的性能和可擴(kuò)展性。它運(yùn)行HTTP負(fù)載測試,這是有用的容量規(guī)劃,基準(zhǔn),分析和系統(tǒng)調(diào)整。
Pylot產(chǎn)生并發(fā)負(fù)載(HTTP請求),驗(yàn)證服務(wù)器的響應(yīng),并制作報告的度量。測試套件的執(zhí)行和監(jiān)測,從一個GUI或shell /控制臺。
Pylot基于Python開發(fā),和著名的Apache壓力測試工具ab一樣,默認(rèn)在命令行運(yùn)行,也可以通過參數(shù)觸發(fā)GUI界面,當(dāng)然前提是安裝了wxPython的。
2、Pylot如何工作?
你開始在一個XML文件(testcases.xml)中定義你的測試用例。測試用例是驗(yàn)證你指定的請求(URL,Method,Body等)?梢则(yàn)證服務(wù)器響應(yīng)的正則表達(dá)式匹配的內(nèi)容,HTTP狀態(tài)碼。您可以通過調(diào)整負(fù)載的工作量控制GUI或命令行設(shè)置,然后再開始測試運(yùn)行(數(shù)目的代理,請求的時間間隔,上升時間,測試時間)。這些設(shè)置,您可以根據(jù)不同的負(fù)載情況下的模型試驗(yàn)。在運(yùn)行加載的情況下,并傳遞到負(fù)載產(chǎn)生引擎。代理調(diào)度和運(yùn)行,同時發(fā)送HTTP請求到你的web服務(wù)。它在執(zhí)行過程中生成實(shí)時的統(tǒng)計和錯誤報告,通過這個報告可以很方便的進(jìn)行監(jiān)控。
3、Pylot應(yīng)用場景
開發(fā)人員,測試人員和性能工程師需要測試和調(diào)整他們的Web服務(wù)的性能和可擴(kuò)展性。也可以使Python程序員集成到更大的測試套件。使用這個工具可以使你更加熟悉HTTP,XML和性能測試。
4、產(chǎn)品特點(diǎn)
HTTP和HTTPS(SSL)支持
多線程負(fù)載生成器
自動cookie處理
響應(yīng)驗(yàn)證與正則表達(dá)式
執(zhí)行/監(jiān)控控制臺
實(shí)時統(tǒng)計
結(jié)果報告和圖形
定制的timer
GUI模式
外殼/控制臺模式
跨平臺
5、入門指南
平臺:
控制臺和阻塞模式
控制臺和隔離模式運(yùn)行在所有平臺上的Python 2.5 +可以安裝。視窗XP,Vista中,Ubuntu 8.04/8.10,華碩Eee PC,Mac的OS測試。
GUI模式
Pylot,GUI將運(yùn)行在所有平臺上支持Python和wxWidgets。大多被開發(fā)的GUI測試在Windows,但Linux和Mac看起來體面。應(yīng)用程序代碼是純Python和使用一個跨平臺的工具包。
安裝Pylot
第1步:下載并解壓縮最新的Pylot發(fā)布
獲取最新版本:下載Pylot
第2步:安裝Python 2.5 +
獲取安裝程序從這里開始:http://www.python.org/download
第3步:安裝wxPython(可選 - 用于GUI模式)
從這里獲取安裝程序:http://www.wxpython.org/download.php
第4步:安裝numpy的(可選 - 用于報告以圖表)
從這里獲取安裝程序:http://sourceforge.net/projects/numpy
第5步:安裝matplotlib的(可選 - 用于報告以圖表)
從這里獲取安裝程序:http://sourceforge.net/projects/matplotlib
第6步:運(yùn)行Pylot
GUI模式:
> python run.py -G
控制臺和阻塞模式 - 命令行選項:
用法:run.py [選項] ARGS-A, - 代理= NUM_AGENTS的代理數(shù)量-D, - 持續(xù)時間:測試時間以秒為單位-r時, - 斜坡上升=斜坡上升:斜坡上升在幾秒鐘內(nèi)-I, - 間隔=間隔:間隔時間(以毫秒為單位)-X - XMLFILE = TEST_CASE_XML:測試的情況下,XML文件-O, - OUTPUT_DIR = path:輸出目錄-N, - = testname代表:姓名測試-L, - log_msgs:日志消息-B, - 阻塞:阻塞模式-G, - GUI:啟動GUI-P, - 端口PORT:XML-RPC監(jiān)聽端口
遠(yuǎn)程啟動Pylot:
Pylot包含一個XML-RPC服務(wù)器,可以啟動,這樣你就可以開始測試與遠(yuǎn)程客戶端。
配置選項:
“的文件/核心/ config.py的包含了一些全局配置選項。您可以設(shè)置某些defauls和改變某些行為。如果在命令行上指定這些選項是覆蓋。
AGENTS = 1DURATION = 60 # secsRAMPUP = 0 # secsINTERVAL = 0 # millisecsTC_XML_FILENAME = 'testcases.xml'OUTPUT_DIR = NoneTEST_NAME = NoneLOG_MSGS = FalseGENERATE_RESULTS = TrueSHUFFLE_TESTCASES = False # randomize order of testcases per agentWAITFOR_AGENT_FINISH = True # wait for last requests to complete before stoppingSMOOTH_TP_GRAPH = 1 # secs. smooth/dampen throughput graph based on an intervalSOCKET_TIMEOUT = 300 # secsCOOKIES_ENABLED = TrueHTTP_DEBUG = False # only useful when combined with blocking mode BLOCKING = False # stdout blocked until test finishes, then result is returned as XMLGUI = False
使用Pylot
步驟1:創(chuàng)建測試案例
測試案例名為“testcases.xml”的,或在命令行上指定一個不同的XML文件中聲明一個XML文件。這是的格式測試引擎可以理解的。
使用下面的語法定義一個測試?yán)V挥蠻RL元素是必需的。
<case> <url>URL</url> <method>HTTP METHOD</method> <body>REQUEST BODY CONTENT</body> <add_header>ADDITIONAL HTTP HEADER</add_header> <verify>STRING OR REGULAR EXPRESSION</verify> <verify_negative>STRING OR REGULAR EXPRESSION</verify_negative> <timer_group>TIMER GROUP NAME</timer_group></case>
下面是一個例子,最簡單的可能的測試案例文件。它包含了一個測試案例,試運(yùn)行期間,將連續(xù)執(zhí)行。的測試用例包含一個URL下測試的服務(wù)。由于身體沒有一種方法或定義,它會默認(rèn)發(fā)送一個HTTP GET到這個資源。由于沒有驗(yàn)證的定義,它會通過/失敗測試案例的基礎(chǔ)上的HTTP狀態(tài)代碼(通過,如果狀態(tài)是<400)。
<testcases> <case> <url>http://www.example.com/foo</url> </case></testcases>
我們可以添加正面和負(fù)面的驗(yàn)證。一個積極的驗(yàn)證是在響應(yīng)主體必須包含一個字符串或正則表達(dá)式。負(fù)的驗(yàn)證是一個字符串或正則表達(dá)式,必須不包含在響應(yīng)主體。
<case> <url>http://www.goldb.org/foo</url> <verify>Copyright.*Corey Goldberg</verify> <verify_negative>Error</verify_negative><case>
餅干:
Cookies是自動處理的。如果收到一個響應(yīng)的“設(shè)置Cookie”頭,cookie將被設(shè)置在頭的后續(xù)請求并傳回。
例:雅虎搜索的Web服務(wù)(REST API)
雅虎提供各種REST Web服務(wù)來訪問搜索結(jié)果。在這個例子中,我將展示如何創(chuàng)建Pylot的REST API進(jìn)行交互的測試用例。
下面是一個簡單的GET請求對服務(wù):
http://search.yahooapis.com/WebSearchService/V1/webSearch?appid=YahooDemo&query=foo
申請一個Pylot測試案例是這樣的:
<case> <url>http://search.yahooapis.com/WebSearchService/V1/webSearch?appid=YahooDemo&query=foo</url></case>
請注意符號(&)的URL逃脫的代碼:“&”
這是becasue的某些字符(“<”和“&”)是非法的XML文件。由于我們是在一個XML文檔definig測試用例,我們必須避開這些符號代碼,或?qū)⑺鼈兎胖迷谝粋CDATA部分。
雅虎還允許POST數(shù)據(jù)塊來傳遞查詢參數(shù)。在這種情況下,我們還必須改變“內(nèi)容類型”HTTP頭:“應(yīng)用程序/ x - www的形式,進(jìn)行了urlencoded”。(Pylot默認(rèn)為text / xml“)
下面是一個POST請求對服務(wù):
<case> <url>http://search.yahooapis.com/WebSearchService/V1/webSearch</url> <method>POST</method> <body><![CDATA[appid=YahooDemo&query=webinject]]></body> <add_header>Content-type: application/x-www-form-urlencoded</add_header></case>
現(xiàn)在,我們知道如何創(chuàng)建單獨(dú)的情況下,我們可以創(chuàng)建一個測試案例文件,其中包含幾個這樣的。在這個例子中,我們的測試情況下,文件包含Yahoo等搜索查詢?yōu)椋骸案弧,“酒吧”,“巴茲?/p>
<testcases> <case> <url>http://search.yahooapis.com/WebSearchService/V1/webSearch?appid=YahooDemo&query=foo</url> </case> <case> <url>http://search.yahooapis.com/WebSearchService/V1/webSearch?appid=YahooDemo&query=bar</url> </case> <case> <url>http://search.yahooapis.com/WebSearchService/V1/webSearch?appid=YahooDemo&query=baz</url> </case></testcases>
例如:SOAP API
談任何HTTP API,我們可以模擬我們的測試用例。這個例子展示了如何將請求發(fā)送到一個SOAP服務(wù)。我們需要發(fā)送的SOAP信封將被封裝在HTTP POST主體。
<case> <url>http://www.example.org/StockPrice</url> <method>POST</method> <add_header>Content-Type: application/soap+xml; charset=utf-8</add_header> <body><! [CDATA[ <!-- This is the SOAP Envelope --> <?xml version="1.0"?> <soap:Envelope xmlns:soap="http://www.w3.org/2001/12/soap-envelope" soap:encodingStyle="http://www.w3.org/2001/12/soap-encoding"> <soap:Body xmlns:m="http://www.example.org/stock"> <m:GetStockPrice> <m:StockName>IBM</m:StockName> </m:GetStockPrice> </soap:Body> </soap:Envelope> ]]> </body></case>
例如:設(shè)置靜態(tài)變量/參數(shù)
你可以在你的測試用例文件中定義的全局參數(shù)。這是非常有用的,如果你有一個值之間共享一些測試情況下,你經(jīng)常改變。在下面的例子中,我們定義了一個“http_server”參數(shù),然后使用該令牌在一個測試案例。
<testcases> <param name="http_server" value="http://www.example.com" /> <case> <url>${http_server}/foo</url> </case></testcases>
例如:基于文件的HTTP有效載荷
您可能希望,POST數(shù)據(jù)存儲在一個外部文件中,而不是直接宣布它在你的測試用例XML文件。這是非常有用的,如果你有非常大的POST人體的或要發(fā)送的二進(jìn)制數(shù)據(jù)不能被嵌入到XML。使用下面的語法將數(shù)據(jù)從一個文件,它張貼在運(yùn)行。
<case> <url>http://www.example.com/foo</url> <method>POST</method> <body file="./myfile.dat"></body></case>
第2步:模型工作負(fù)載方案
定義的工作負(fù)載使用的用戶界面上的控件。使用下面的選項。您可以創(chuàng)建一個的穩(wěn)態(tài)或增加負(fù)載測試。
代理:代理(虛擬用戶)來運(yùn)行
斜坡上升時間跨度代理開始。他們將被均勻地分布在整個這段時間內(nèi)。(參見下面的注釋)
每個用戶發(fā)送請求的時間間隔:間隔。每個用戶代理的請求,節(jié)奏均勻的時間間隔(,除非反應(yīng),分析反應(yīng)時間比較慢的文天生定義的時間間隔)
播放時間:時間跨度的測試
第3步:執(zhí)行和監(jiān)控
運(yùn)行模式
控制臺模式:在測試過程中,您可以查看實(shí)時統(tǒng)計在用戶界面(UI)
阻塞模式:STDOUT被阻塞,直到測試結(jié)束后,返回結(jié)果為XML
GUI模式:管理和運(yùn)行測試的GUI界面
測試運(yùn)行結(jié)束時,自動生成一個HTML報告,表示測試結(jié)果和圖表。
第4步:查看結(jié)果
當(dāng)測試完成后,結(jié)果目錄創(chuàng)建并自動生成一份報告,總結(jié)測試結(jié)果。它包括各種統(tǒng)計數(shù)據(jù)和圖表,響應(yīng)時間和吞吐量。結(jié)果報告的樣本可以在這里看到:
Pylot結(jié)果寫入到CSV文本文件,因此你可以導(dǎo)入到您最喜愛的電子表格處理數(shù)字,生成統(tǒng)計數(shù)據(jù),并創(chuàng)建圖表。