Ruckus Wireless Nezávislé testy Jiří Zelenka, Petr Čechura
Testování v reálných podmínkách Tom s Hardware 08/2011 http://www.tomshardware.com/reviews/wi-fiperformance,2985.html http://www.alternetivo.cz/inc/info/download/toms_hardw are_cz.pdf Univerzita v Syracuse, NY test 3-streamových 802.11n AP 10/2012 http://dcc.syr.edu/pdf/ccent_3-stream_eval.pdf WiFi stress test - Wireless LAN Professionals 02/2013 http://www.wlanpros.com/wp- content/uploads/2013/02/wi- Fi%20Stress%20Test%20Report.pdf
Tom s Hardware: Co jsme se dozvěděli? Ruckus exceluje na velké vzdálenosti Downlink, kde Ruckus opět vede, reprezentuje 80% provozu v dnešním kancelářském mixu Ruckus poskytuje největší agregovanou propustnost v prostředí s nároky na vysokou kapacitu Ruckus má vynikající schopnosti vypořádat se s interferencemi Spravedlivé rozdělení pásma je klíčové a Ruckus opět dominuje Ruckus předvedl konzistentní výsledky napříč celým testem
Kde je rozdíl? fixní spojení rádia a antény dynamické propojení
Kde se testovalo?
Jaká zařízení se testovala?
Detaily testování IxChariot server a koncové body Dell Latitude E6410 (3x3:3) pro testy jednoho klienta Dell Vostro (2 streamy) zdroje rušení generátor non-wifi rušení 60 notebooků kontinuálně stahující 1MB soubor přes stejný wifi kanál z různých AP různé testy 2,4 a 5 GHz, downlink/uplink 3, 21 a 30 metrů jedna stanice, agregovaná propustnost
Pokrytí signálem 2,4GHz
Pokrytí signálem 5GHz
Propustnost na 3m (5GHz)
Propustnost na 21m (5GHz)
Propustnost na 21m (5GHz)
Propustnost na 30m (5GHz)
Propustnost na 30m (5GHz)
Agregovaná propustnost 60 klientů (5GHz)
Agregovaná propustnost 60 klientů (5GHz) DOWNLINK
Agregovaná propustnost 60 klientů (5GHz) UPLINK
Agregovaná propustnost ipady/notebooky
Spravedlivé rozdělení pásma mezi různé typy zařízení b/g vs. n ipad 13Mbps ve špičce (1 stream) dobrý notebook s 11n > 100Mbps (2 nebo 3 streamy) rostoucí množství a rozdíly mezi zařízeními
Spravedlivé rozdělení pásma
Co je za tím? patentovaná technologie chytrá anténa algoritmy pro výběr nejlepší cesty pokročilý QoS chytrá mesh centralizovaný wifi management snadno se adaptuje na změny v reálném čase a prostředí rozšiřuje wifi pokrytí 2-4x radikálně zjednodušuje nasazení
První nezávislý test 3-streamových 802.11n AP říjen, 2012
Začínáme na konci (klíčová zjištění) 1. Nezávislý test prováděný univerzitou v Syracuse (žádný z výrobců neplatil za testování) 2. Výrobci spolupracovali s univerzitou na přípravě testu, ale nemohli nijak ovlivnit vlastní testování 3. Byly zjištěny velké rozdíly mezi tvrzením výrobců a skutečnými vlastnostmi 3-streamových 802.11n AP 4. S rostoucí vzdáleností a rušením výkonnost AP prudce klesá 5. nejlepších výsledků dosáhl Ruckus, byť nevyhrál úplně všechny testy
Přehled testování Cíl: určit skutečnou výkonnost 3-streamových AP Aerohive 330 Aruba 135 Cisco 3602i Meraki 24 Ruckus 7982 Prováděné testy: 1. jedno AP, jeden klient 2. jedno AP, více klientů 3. více AP, více klientů
Celkové výsledky dle výrobců 2% 6% 12% 14% 66% procento vyhraných testů (z celkového počtu 87)
Celkové výsledky dle výrobců 3% 17% 83% 32% 58% více klientů (12 testů) 0% více AP (30 testů) 3%
Metodologie testování testování v prostředí, které se co nejvíc podobá reálnému nasazení u zákazníků většina současných nasazení se dělá na kapacitu, nikoli na pokrytí výsledky pro scénář 1 klient na jedno AP negarantují úspěšné nasazení pro více současných klientů tvrzení výrobců skutečná propustnost Cíl ukázat skutečnou, smysluplnou, dosažitelnou výkonnost
Podmínky testování velmi čisté RF prostředí (testy probíhaly v noci) 3-streamové MacBook Pro a NETGEAR USB dongly IxChariot: Throughput.scr přenos 1MB souborů po dobu 2 minuty výkonný Throughput skript pro testy jednotlivých AP přenos 10MB souborů po dobu 2 minuty šířka kanálu 20MHz pro 2,4GHz, 40MHz pro 5GHz výběr kanálů AP jedno AP: kanál 1 (2,4 GHz), kanál 36 (5 GHz) více AP: automatický výběr kanálů, pak nastaveno manuálně vítěz určen TCP propustností
Hinds Hall
Přehled testů 1. jedno AP, jeden klient na rádio různé vzdálenosti 2,4 GHz, 5 GHz, 2,4 GHz a 5 GHz 135 testů na každé AP (5 umístění, 3 frekvence, 3 orientace, uplink/downlink/mix) 2. jedno AP, více klientů jedno AP, 3 místnosti, 30 klientů/místnost místnosti jsou v různých vzdálenostech od AP 2,4 GHz, 5 GHz, 2,4 GHz a 5 GHz 3. více AP, více klientů 1-4 místnosti s 30 klienty (120 klientů celkem) spuštěné služby automatický výběr kanálů, klient load balancing, band steering testy s a bez rušících WiFi sítí v blízkosti
Test č.1: jedno AP, jeden klient 5 umístění s různou vzdáleností a překážkami 2,4 GHz, 5GHz, obě pásma uplink/downlink/mix 3 orientace umístění klientů 1 17m od AP 7m od AP = 135 (5 * 3 * 3 * 3) testů každé AP AP 4 5 HINDS HALL 3 2 9m od AP 12m od AP 32m od AP
Jedno AP, jeden klient - výsledky průměr z tří různých umístění (klient rotoval) s dvěma klienty (různá pásma) 2,4 GHz 1 Mbps 372 368 O B O U S M Ě R N Ě TCP PROPUSTNOST 4 DUAL-BAND KLIENTI KRÁTKÁ VZDÁLENOST 320 umístění č. 4, 7,3m 260 2 192 5 GHz Ruckus 7982 Aruba 135 Cisco 3602i Aerohive 330 Meraki 24
Jedno AP, jeden klient - výsledky Mbps 275 274 O B O U S M Ě R N Ě TCP PROPUSTNOST 4 DUAL-BAND KLIENTI STŘEDNÍ VZDÁLENOST umístění č. 1, 17,7m 2,4 GHz 1 2 184 159 5 GHz 68 Ruckus 7982 Aruba 135 Aerohive 330 Cisco 3602i Meraki 24
Jedno AP, jeden klient - výsledky Mbps 228 O B O U S M Ě R N Ě TCP PROPUSTNOST 4 DUAL-BAND KLIENTI DLOUHÁ VZDÁLENOST 2,4 GHz 184 umístění č. 5, 32m 1 142 2 107 5 GHz 44 Ruckus 7982 Aruba 135 Aerohive 330 Cisco 3602i Meraki 24
Test č.2: jedno AP, více klientů jedno AP, tři místnosti, 30 klientů/místnost smíšená pásma (⅓ na 2,4 GHz ⅔ na 5 GHz) + obousměrný provoz všichni klienti asociováni na AP i když neprobíhal test 1. místnost č.1: 6m od AP 2 30 PC s dongly 2. místnost č.2: 13,5m od AP 1 AP 30 MacBooků Pro 3. místnost č.3: 16,5m od AP 3 30 PC s dongly střed místnosti 30 pravidelně rozmístěných klientů 4. 90 klientů napříč všemi místnostmi simultánně
Jedno AP, více klientů, místnost č.1 Mbps 206 183 180 O B O U S M Ě R N Ě TCP PROPUSTNOST 1 AP, 1 MÍSTNOST, 30 KLIENTŮ KRÁTKÁ VZDÁLENOST místnost č.1, 3m 128 99 Ruckus 7982 Aruba 135 Cisco 3602i Aerohive 330 Meraki 24
Jedno AP, více klientů, místnost č.2 Mbps 143 119 O B O U S M Ě R N Ě TCP PROPUSTNOST 1 AP, 1 MÍSTNOST, 30 KLIENTŮ STŘEDNÍ VZDÁLENOST místnost č. 2, 15m 71 71 18 Ruckus 7982 Aruba 135 Cisco 3602i Aerohive 330 Meraki 24
Jedno AP, více klientů, místnost č.3 Mbps 91 O B O U S M Ě R N Ě TCP PROPUSTNOST 1 AP, 1 MÍSTNOST, 30 KLIENTŮ DLOUHÁ VZDÁLENOST 63 místnost č.3, 18m 31 25 Ruckus 7982 Aruba 135 Cisco 3602i 0 Aerohive 330 Meraki 24
Jedno AP, mnoho klientů Mbps 130 O B O U S M Ě R N Ě TCP PROPUSTNOST 1 AP, 3 MÍSTNOSTI, 90 KLIENTŮ VŠECHNY MÍSTNOSTI 77 56 39 Ruckus 7982 Aruba 135 Cisco 3602i Aerohive 330 0 Meraki 24
Test č.3: více AP, více klientů 4 AP, 4 místnosti každá místnost má AP a 30 klientů(120 klientů celkem) klienti: ⅓ na 2,4 GHz, ⅔ na 5 GHz 2 další AP nablízku (rušení) zapnuté funkce: R 2 A P automatický výběr kanálů klient load balancing airtime fairness 1. místnost č.1: 30 PC s Netgear dongly 2. místnost č.2: 24 MacBooků, 6 Dell laptopů 3. místnost č.3: 30 PC s Netgear dongly 4. místnost č.4: 30 PC s Linksys dongly 1 A P A P 4 AP místnosti AP A P 3 testováno s a bez rušivých AP nablízku na 2 PC běžel iperf během celého testu
Více AP, více klientů Mbps 562 480 O B O U S M Ě R N Ě TCP PROPUSTNOST 6 AP, 120 KLIENTŮ BEZ RUŠIVÝCH AP 24 klientů uploaduje (8 na 2,4 a 16 na 5GHz) 96 klientů downloaduje (32 na 2,4 a 64 na 5 GHz) 378 330 324 Ruckus 7982 Cisco 3602i Aruba 135 Meraki 24 Aerohive 330
Více AP, více klientů Mbps 570 O B O U S M Ě R N Ě TCP PROPUSTNOST 6 AP, 120 KLIENTŮ S RUŠIVÝMI AP 441 RUŠIVÉ AP Dual-band AP s dvěma 2,4GHz notebooky přenášející data tam i zpět na stejném kanále (6) a 5 GHz radio vysílající bez klientů 374 369 324 Ruckus 7982 Aerohive 330 Meraki 24 Cisco 3602i Aruba 135
Souhrn 3-streamová AP 802.11n nedávají takový výkon, jaký slibují výrobci je zapotřebí přísná metodologie testování testování jeden klient na jedno AP nedává reálný obraz více AP s více klienty ukazuje skutečný svět pro získání pravdy je zapotřebí stovek testů je třeba vytvořit opakovatelné testy je třeba zajistit, aby všechna SSID byla stejná pro všechny výrobce klienti musí být asociováni Ruckus ZF 7982 podával konzistentní výsledky vysoké výkonnosti
WiFi stress test vyberte nejlepší enterprise AP od všech světových výrobců a vystavte je zatížení na hranici jejich možností test byl proveden firmou Wireless LAN Professionals cílem testu bylo zjistit, kde jsou hranice dnešních AP a proč a jak se různá na první pohled podobná AP chovají různě
WiFi stress test vajíčka nebo nanuky? test padajícího vejce mnoho výrobců testuje svá AP účelově, aby dosáhla nejlepších výsledků v takovém testu se dá vždy vyhrát test zatížení mostu z nanukových dřívek stejné podmínky pro všechny test končí kolapsem zařízení
WiFi stress test - setup koncepce testu byla podobná nasazení ve školním prostředí 1:1 4 MacBooky Pro 30 ipadů přenos videa na ipadech kombinovaný s FTP přenosem na MacBook
WiFi stress test - setup 16 AP, 10 výrobců eliminace některých výhod jednotlivých výrobců BeamFlex umístění AP stíralo rozdíl u Xirrusu byla spuštěna jen 2 rádia! jako základ spuštěn FTP přenos poté postupně přidávány sady 5 ipadu streamující video opakováno pro 0,5,10,15,20,25 ipadů žádné AP nevydrželo 30 ipadů 40MHz kanály byly potlačeny
WiFi stress test - výsledky 1. Ruckus 7982 2. Cisco 3602i 3. HP 430 4. Cisco 2602i 5. Juniper 532 6. Aerohive AP330 7. Xirrus 4820 8. Ruckus 7363 9. Aerohive AP121 10. Aruba 135 11. HP 460 12. Aruba 105 13. Meraki MR24 14. Linksys EA4500 15. Meraki MR16 16. Ubiquiti UniFi Pro
WiFi stress test - výsledky propustnost 20 18 16 14 12 10 8 6 4 2 0 nejvyšší, nejspolehlivější Ruckus 7982 Juniper 532 Cisco 3602i Ruckus 7363 Cisco 2602i HP 430 Aerohive AP330 Aerohive AP121 Xirrus 4820 HP 460 Linksys EA4500 Aruba 135 Aruba 105 Meraki MR24 nejnižší, nejméně spolehlivé 20 30 40 50 60 70 80 chyby při přenosu videa Meraki MR16 Ubiquiti UniFi Pro
WiFi stress test - výsledky
WiFi stress test - výsledky
Děkuji za Vaši pozornost Alternetivo s.r.o. Žirovnická 2389 106 00 Praha 10 Kontakty: jméno Recepce: +420 221 771 881 Fax: +420 221 771 882 O2: +420 724 610 000 T-mobile: +420 739 960 120 Vodafone: +420 773 881 800 e-mail: info@alternetivo.cz