Cocaine Dealer — Building high-performance reliable routing in distributed computational cloud.

Thursday, September 27, 12

Code WizardРим Зайдуллин

Эффективнаямаршрутизация ввычислительном облаке (PG-13)


Настало время офигительных историй3


4 ROUTE TO THE CLOUDThursday, September 27, 12

Структура кокаинового облака

5

C

C

C

01010010

Cocaine Cloud

C

C

C

C

C

C

01010010

01010010



6

Clients

Java Python

C++

PerlPHP

and more



7

C

C

C

01010010

CocaineКлиенты

01010010

01010010

?Java

Python

C++

Perl


Как максимально быстро и надёжно доставлять

сообщения?

8

Задача


Cocaine Dealer — точка входа в облако.

9

О чём речь?



10

C

C

C


?Java

Python

C++

Perl

01010010

01010010

01010010



11

C

C

C

01010010


01010010

01010010

Java

Python

C++

Perl

Dealer

D

D


С чем мы имеем дело?

12


13 Она просто взорвалась или типа тогоThursday, September 27, 12

14

Как растёт инфраструктура?

Балансировщик

Серверы


15 ВЫЛЕЗАЙ, ПРИЕХАЛИThursday, September 27, 12

16


Балансировщик Серверы


17 Мелкие неприятности в ДЦThursday, September 27, 12

18


ДЦ 1 ДЦ 2

ДЦ 3


Как максимально быстро и надёжно доставлять

сообщения?

19

Задача


1. Performance20



21

О чём речь?

Это библиотеканаписанная на С++


Логическая структура облака

22

C

C

C

01010010


01010010

01010010

Java

Python

C++

Perl

Dealer

D

D


Физическая структура облака

23

C

C

C

01010010


01010010

01010010

Java

Dealer

D

C++ D

Python D


2. Cloud awareness24


Cloud awareness

25

App Dealer

Node 1

Node 2


Cloud awareness

26

App Dealer

Node 1

Node 2


Cloud awareness

27

App Dealer

Node 1

Node 2


3. Always ON28


Always ON

29

App Dealer Cloud


Always ON

30

App Dealer Cloud


4. Fine tuning31


Политики маршрутизации

• Deadline• Max retries• Priority• Persistence• etc.

32


5. Persistent delivery33


Persistent delivery

34

App Dealer Cloud


Persistent delivery

35

App Dealer Cloud


Persistent delivery

36

App Dealer Cloud


Persistent delivery

37

App Dealer Cloud


Persistent delivery

38

App Dealer Cloud


6. Smart balancing39


Naive balancing

40

Dealer


Naive balancing

41

Dealer

w w w


Naive balancing

42

Dealer

w w w


Smart balancing

43

Dealer

w1 w2 w3


7. Health monitoring44


Health monitoring

45

App Dealer

Node

Node


Health monitoring

46

App Dealer

Node

!!!


Health monitoring

47

App Dealer

Node

!!!


Health monitoring

48

App Dealer

Node

!!!


Health monitoring

49

App Dealer

Node

Node


1. Performance2. Cloud awareness3. Always on4. Fine tuning5. Smart balancing 6. Persistent delivery7. Health monitoring

50


Simple API

51

dealer_t dealer("config.json");

message_path_t path("image_app", "filter");

dealer.send_message(image, path);



52

1. Балансировщик2. Маршрутизатор3. Очередь запросов


Code Wizard

[email protected]/porca_troia

Спасибо

Рим Зайдуллин


mailto:[email protected]

mailto:[email protected]

Cocaine Dealer — Building high-performance reliable routing in distributed computational cloud.

Technology

Transcript of Cocaine Dealer — Building high-performance reliable routing in distributed computational cloud.