RabbitMQ. Tomáš Jecha (MVP) jechtom Školení vývojářů Články a diskuzní fóra

Rozměr: px

Začít zobrazení ze stránky:

Download "RabbitMQ. Tomáš Jecha (MVP) jechtom Školení vývojářů Články a diskuzní fóra"

Kristina Fišerová
před 7 lety
Počet zobrazení:

RabbitMQ Tomáš Jecha (MVP) tomas@jecha.net jechtom www.jecha.net Školení vývojářů www.

1 RabbitMQ Tomáš Jecha (MVP) jechtom Školení vývojářů Články a diskuzní fóra

2 Program Úvod, instalace, konfigurace Fronty, publikace a čtení zpráv Pokročilé routování zpráv Demo implementace do stávající aplikace Pluginy Další postupy

3 ÚVOD, INSTALACE, KONFIGURACE

4 RabbitMQ Open source message broker Pod hlavičkou VMware Multiplatformní Windows, Linux / Unix, Mac OS X Napsané v jazyce Erlang Podpora řady vývojářských platforem

5 Komunikace se serverem Klienti (oficiálně):.net, Java, Erlang Klienti (neoficiálně) Ruby, Python, PHP, Perl, C/C++, Lisp, Haskell, Ocaml, Go, Amazon EC2 Protokoly: AMQP+ (0.9.1) STOMP (1.0, 1.1, 1.2) Management REST HTTP API

6 Advanced Message Queuing Protocol Standardizovaný, otevřený ( Microsoft, VMware, Cisco, Red Hat Binární protokol pro bezpečný a spolehlivý přenos zpráv Implementován například: Windows Azure Service Bus, ApacheMQ, StormMQ RabbitMQ verze extenze

7 Instalace Erlang Windows Binary File Erlang runtime (Erricson) RabbitMQ Server pro Windows Serverová windows služba Základní sada pluginů Konzolové příkazy na správu

8 Konfigurace a správa Příkazy: rabbitmqctl.bat Hlavní konfigurace (uživatelé, zabezpečení, cluster...) rabbitmq-plugins.bat Povolování / zakazování pluginů rabbitmq-server.bat Standalone server rabbitmq-service.bat Správa serveru jako Windows služby Environment variables (RABBITMQ_BASE) Konfigurační soubory Web management plugin (

9 demo Instalace a konfigurace Web management plugin Konfigurace permissions

10 Architektura RabbitMQ RabbitMQ Server Client Publisher Publish Exchange Routing Queue Consume Client Consumer

11 Exchanges Fronta pro předávání zpráv Příjímá zprávy od: Klientů (publisher) Jiných exchanges Zpráva je vyřazena při: Předání všem odpovídajícím cílům Vlastnosti: Binding kam zprávy předávat? Type (fanout, direct, topic, headers) Durable/Transient Internal, Alternate Exchange Custom properties

12 Queues Fronta zpráv Přijímá zprávy od Exchanges Zpráva je vyřazena při: Potvrzení/odmítnutí konzumeterem Vypršení TTL Vlastnosti: Durable/Transient TTL, Dead Letter Exchange, Auto Delete Custom properties

13 Zpráva Směrování Exchange RouteKey Properties System properties (DeliveryMode, CorrelationId, ApplicationId...) Custom properties Obsah

14 FRONTY, PUBLIKACE A ČTENÍ ZPRÁV

15 Defaultní Exchange Zasílání zpráv přímo do front Automaticky vyhledá front podle RouteKey zprávy Vhodné pro jednodušší scénáře Není potřeba Exchange vytvářet nebo konfigurovat, stačí založit frontu Jméno: (empty string)

16 Default Exchange RabbitMQ Server Client Publisher A; RouteKey=Q1 B; RouteKey=Q2 C; RouteKey=Q3 Publish Default Exchange Queue Q1 A; RouteKey=Q1 Queue Q2 B; RouteKey=Q2

17 demo Nová fronta Publikace zpráv C#

18 Další vlastnosti zpráv Delivery mode 1 = Non-persistent; 2 = Persistent AppId Identifikátor zdroje CorrelationId Párování zpráv (například RPC volání) Reply To Jméno exchange pro odpověď (RPC) Content Encoding & Content Type Informace o obsah zprávy

19 Konzumace zpráv Způsob doručení: Pull příkaz Get, získá 1 zprávu Push příkaz Consume, přihlášení k odběru Potvrzování zpráv Bez potvrzení (noack=true) Zpráva je po doručení považována za zpracovanou S potvrzením (noack=false) Zpráva je po doručení ve stavu nepotvrzena a čeká se na Ack / Nack (Reject) Pokud zprávu zamítneme, lze je: Zabít (requeue=false) Nebo vrátit do fronty (requeue=true)

20 demo Konzumace zpráv Použití čtení Pull vs Push Potvrzování / odmítání zpráv

21 POKROČILÉ ROUTOVÁNÍ ZPRÁV

22 Typy Exchanges Fanout Direct Topics Headers

23 Typy Exchanges Fanout Distribuce všem bindovaným odběratelům Direct Topics Headers

24 Fanout Exchange RabbitMQ Server Client Publisher Publish Fanout Exchange Queue Q1 A B C A B C Queue Q2 A B C

25 demo Fanout Exchange

26 Typy Exchanges Fanout Direct Rozhoduje parametr zprávy RouteKey Bude odeslána routováním, kterém má nastavený shodný RouteKey Topics Headers

27 Direct Exchange RabbitMQ Server Client Publisher A; RK=first B; RK=first C; RK=second D; RK=other Publish Direct Exchange Queue Q1 Queue Q2 A; RK=first B; RK=first C; RK=second

28 demo Direct Exchange

29 Typy Exchanges Fanout Direct Topics Podobně jako u Direct rozhoduje parametr zprávy RouteKey Zástupné znaky: * = libovolné jedno slovo (oddělená tečkama) # = žádné nebo více libovolných slov Headers

30 Topics Exchange RabbitMQ Server Client Publisher A; RK=color.blue Publish B; RK=color.red.dark C; RK=animal.dog D; RK=animal.dog.x Topics Exchange Queue Q1 A; RK=color.blue B; RK=color.red.dark Queue Q2 C; RK=animal.dog

31 demo Topics Exchange

32 Typy Exchanges Fanout Direct Topics Headers Pokročilejší routování podle libovolných vlastností zprávy (ne jen podle RouteKey)

33 DEMO IMPLEMENTACE DO STÁVAJÍCÍ APLIKACE

34 Proč používat fronty? Aplikace spolu nekomunikují přímo Technologická nezávislost Výpadek aplikace nemusí způsobit výpadek celé služby Bezpečnost Možnost opakovat události

35 Modelová aplikace Nová objednávka E-shop Order Service Mail Service DB MAIL SERVER

36 demo Stávající implementace

37 Modelová aplikace E-shop Nová objednávka Order processor Order Service Impl Mail Sender Mail Service Impl Order Service RabbitMQ DB Mail Service RabbitMQ MAIL SERVER Order Queue Mail Queue RabbitMQ

38 demo Implementace

39 PLUGINY

40 Pluginy Serverové: Management Plugin Webový interface STOMP Simple Text Messaging Protocol Autentifikace pomocí LDAP SSL komunikace

41 Federation Plugin Nový typ exchange Federation konzumuje zprávy vložené do vzdálených Upstream exchanges RabbitMQ Server #1 RabbitMQ Server #2 Publish Upstream Exchange Upstream link Federation Exchange Routing Queue

42 Shovel Plugin Přehazuje zprávy z jedné fronty do libovolného exchange na druhém brokeru Podobný jako Federation plugin, jen na nižší úrovni RabbitMQ Server #1 RabbitMQ Server #2 Queue Consume Shovel plugin Publish Exchange

43 DALŠÍ POSTUPY

44 RabbitMQ.ServiceModel WCF transportní vrstva pomocí front Lze použít pouze na synchronní volání (služba musí být v době volání online) Používá se CorrelationId a Reply_To Client RabbitMQ Server Service Publish request Consume request Temporary Queue #1 Temporary Queue #2 Consume request Publish response

45 Dead Letter Exchange Dead Letter je zpráva ve frontě, která by měla zaniknout z důvodu: Expirace (TTL) Nebo odmítnutí klientem (rejected) Lze nastavit vlastnosti: x-dead-letter-exchange x-dead-letter-routing-key Událost se následně směruje do vybrané exchange Do vlastností se přidají informace

46 demo Dead Letter Exchange

47 Clustering RabbitMQ podporuje clusterování Konfigurace nodů je sjednocená Fronty v clusteru jsou mirrorované z jednoho mastera na: Všechny nody Nebo konkrétní nody Nebo určitý počet nodů Nebo nejsou mirrorované vůbec Pouze do LAN - výpadky spojení nenese dobře

48 Virtual Hosts Logicky rozděluje objekty v brokeru Každý virtual host může obsahovat vlastní: Queues Exchanges Konfiguraci zabezpečení Identifikován jménem Defaultně pouze 1 virtual host /

49 Kdo používá Erlang & RabbitMQ? Erlang: Facebook chat CouchDB GitHub Amazon SimpleDB RabbitMQ: VMware cloudové a virtualizační systémy NASA - NEBULA Cloud Computing Platform Google Rocksteady projekt Microsoft, AT&T, Mozzila, BBC, Digg

50 Další zdroje RabbitMQ - AMQP (protocol) Erlang (language) Kurz C115 dotnetcollege.cz

Tomáš Jecha (MVP) tomas@jecha.net jechtom www.jecha.net Školení vývojářů www.

51 Tomáš Jecha (MVP) jechtom Školení vývojářů Články a diskuzní fóra

Podobné dokumenty

Java Message Service (JMS) Martin Ptáček, KOMIX s.r.o.

Java Message Service (JMS) Martin Ptáček, KOMIX s.r.o. Martin Ptáček, KOMIX s.r.o. ptacek@komix.cz Copyright 2007 KOMIX Copyright s.r.o. 2007 KOMIX s.r.o. 1. Obsah Co je Messaging? Specifikace a architektura JMS Použití JMS API Závěrečné shrnutí Otázky a odpovědi,