WAMP как основа композитных SOA-приложений и его имплементация на Lua
•
0 j'aime•288 vues
WAMP расшифровывается как Web Application Messaging Protocol. Это открытый протокол, реализующий два паттерна в рамках одного протокола: RPC и Publish/Subscribe. Как мне кажется, это отличная платформа для сферы Internet of Things, Smart City и вообще бизнес-приложений с большим количеством различных компонентов и сервисов.
Recommandé
Recommandé
Contenu connexe
Tendances
Tendances (20)
Similaire à WAMP как основа композитных SOA-приложений и его имплементация на Lua
Similaire à WAMP как основа композитных SOA-приложений и его имплементация на Lua (20)
WAMP как основа композитных SOA-приложений и его имплементация на Lua
- 1. WAMP как основа композитных SOA-приложений и его реализация на Lua Константин Буркалёв @KSDaemon
- 2. Пара слов о себе… 2 • Системный архитектор • 15+ лет опыта в ИТ • Автор и ведущий подкастов о разработке: SDCast & RadioJS • Активный участник группы разработки самого протокола WAMP • Автор и мейнтейнер нескольких реализаций WAMP, в том числе и на Lua
- 33. Ванная Комната Задача: Система «Умный дом» 4 Пользователь Админ Админ настраивает пороговые значения
- 38. Что такое WAMP 5
- 41. Что такое WAMP • Расшифровывается как «Web Application Messaging Protocol» • Предназначен для коммуникации между программными компонентами практически в режиме реального времени • Предоставляет два механизма: • Publish/Subscribe (PubSub) • Remote Procedure Calls (RPC) 5
- 42. Что такое WAMP • Расшифровывается как «Web Application Messaging Protocol» • Предназначен для коммуникации между программными компонентами практически в режиме реального времени • Предоставляет два механизма: • Publish/Subscribe (PubSub) • Remote Procedure Calls (RPC) • Двунаправленный, упорядоченный 5
- 43. Что такое WAMP • Расшифровывается как «Web Application Messaging Protocol» • Предназначен для коммуникации между программными компонентами практически в режиме реального времени • Предоставляет два механизма: • Publish/Subscribe (PubSub) • Remote Procedure Calls (RPC) • Двунаправленный, упорядоченный • Для общения клиентов требуется WAMP-роутер 5
- 44. Почему WAMP? 6
- 48. Почему WAMP? •Открытая спецификация • Продуманный Publish/Subscribe • Продуманный Remote Procedure Calls • Роутинг сообщений 6
- 49. Почему WAMP? •Открытая спецификация • Продуманный Publish/Subscribe • Продуманный Remote Procedure Calls • Роутинг сообщений • Кроссплатформенность 6
- 50. Почему WAMP? •Открытая спецификация • Продуманный Publish/Subscribe • Продуманный Remote Procedure Calls • Роутинг сообщений • Кроссплатформенность • Есть реализации более чем на 15 языках 6
- 51. Альтернативы WAMP 7 Technology PubSub RPC Routed RPC Web native Cross Language Open Standard WAMP ✔ ✔ ✔ ✔ ✔ ✔ AJAX - ✔ - ✔ ✔ - AMQP ✔ (✔) - - ✔ ✔ Java JMS ✔ - - - - ✔ JSON-RPC - ✔ - ✔ ✔ ✔ MQTT ✔ - - - ✔ ✔ REST - ✔ - ✔ ✔ - SOAP - ✔ - ✔ ✔ ✔ socket.io ✔ - - ✔ - - XMPP ✔ - - ✔ ✔ ✔ ZMQ ✔ - - - ✔ -
- 54. Архитектура WAMP 10 Клиент. Может предоставлять или потреблять ресурсы, такие как подписки и RPC.
- 58. Архитектура WAMP 14 Сессия. Необходима для идентификации и авторизации клиентов, анонса ролей узлов.
- 64. Основные понятия WAMP • Клиент. Может предоставлять или потреблять ресурсы, такие как подписки и RPC. • Роутер. Занимается авторизацией и маршрутизацией сообщений между клиентами. • Peer, узел. Может быть клиентом или роутером, должен обладать хотя бы одной ролью. • Роль. Определяет возможности узла. Есть 4 клиентских роли и 2 роли роутера. • Сессия. Необходима для идентификации и авторизации клиентов, анонса ролей узлов. • Realm. Домен, namespace, в рамках которого происходит роутинг сообщений. • Транспорт. Можно использовать: WebSockets, Raw TCP, Unix sockets и даже HTTP Long poll. • Сериализатор. Cообщения сериализуются с помощью JSON/MessagePack/CBOR • Идентификаторы ресурсов, URI. Необходимы для топиков, процедур и ошибок. 19
- 68. WAMP: Features • Basic profile: базовые возможности RPC и PubSub • Advanced profile: • Challenge-Response Authentication • Progressive call results, call timeout, call canceling • Publication / call trust levels • Caller / publisher identification • Pattern based registration / subscription • Shared registration, sharded registration / subscription • Event history • Meta API & Procedure / topic reflection 20
- 73. WAMP: установка сессии 21 HELLO WELCOME GOODBYE (init by client) ABORT Клиент Роутер Realm [6, {"message": "The host is shutting down now."}, "wamp.error.system_shutdown"]
- 74. WAMP: установка сессии 21 HELLO WELCOME GOODBYE (init by client) ABORT GOODBYE Клиент Роутер Realm [6, {}, "wamp.error.goodbye_and_out"]
- 75. WAMP: установка сессии 21 HELLO WELCOME GOODBYE (init by client) ABORT GOODBYE GOODBYE (init by router) Клиент Роутер Realm [6, {}, "wamp.error.close_realm"]
- 76. WAMP: установка сессии 21 HELLO WELCOME GOODBYE (init by client) ABORT GOODBYE GOODBYE GOODBYE (init by router) Клиент Роутер Realm [6, {}, "wamp.error.goodbye_and_out"]
- 77. WAMP: установка сессии 21 HELLO WELCOME GOODBYE (init by client) ABORT GOODBYE GOODBYE GOODBYE (init by router) Клиент Роутер Realm
- 123. Применение WAMP: реальные проекты • Kadecot API Server. Sony Computer Science Laboratories • ParaView. Parallel Data Analysis and Visualization Application, Kitware • Record.Evolution. Data-warehouse and Business Intelligence 28
- 124. Применение WAMP: реальные проекты • Kadecot API Server. Sony Computer Science Laboratories • ParaView. Parallel Data Analysis and Visualization Application, Kitware • Record.Evolution. Data-warehouse and Business Intelligence • SmartME smart city project. MDS Lab at the University of Messina 28
- 125. Применение WAMP: реальные проекты • Kadecot API Server. Sony Computer Science Laboratories • ParaView. Parallel Data Analysis and Visualization Application, Kitware • Record.Evolution. Data-warehouse and Business Intelligence • SmartME smart city project. MDS Lab at the University of Messina • ButterflyDNS. Web UI frontend for BIND DLZ • Подсистема управления серверами Gollard VISION 28
- 130. Loowy: WAMP-клиент на Lua 30 • Работает в Lua/Luajit на базе lua-ev • Поддерживает JSON- и Msgpack-сериализаторы • Поддерживает ряд фич из Advanced Profile
- 131. Loowy: WAMP-клиент на Lua 30 • Работает в Lua/Luajit на базе lua-ev • Поддерживает JSON- и Msgpack-сериализаторы • Поддерживает ряд фич из Advanced Profile • Автоматическое переподключение и переподписка
- 132. Loowy: WAMP-клиент на Lua 30 • Работает в Lua/Luajit на базе lua-ev • Поддерживает JSON- и Msgpack-сериализаторы • Поддерживает ряд фич из Advanced Profile • Автоматическое переподключение и переподписка • TODO: Raw socket transport • TODO: Meta API • TODO: Challenge-Response Authorization (WAMP-CRA) • TODO: работа на основе сопрограмм (coroutines)
- 133. Loowy: примеры вызовов 31 client = loowy.new("ws://localhost/ws/", { realm = "gv" }) client:publish('sensor.events', { sensorId = 12, temperature = 27}) client:subscribe('sensor.events', function(event) -- process received event end) client:call('dcs.fan.control', true, { onSuccess = function() -- fan turned on successfully end, onError = function(err) -- error occurred end })
- 135. Loowy: Стек технологий 32 • Lua 5.1+, Luajit 2.0 • lua-websockets (который работает через luasocket) • lua-ev • lua-rapidjson • lua-MessagePack (опционально)
- 139. Wiola: WAMP роутер на Lua • Работает на базе Nginx/Lua module • Использует Redis для runtime storage • Поддерживает JSON- и MessagePack-сериализаторы 33
- 140. Wiola: WAMP роутер на Lua • Работает на базе Nginx/Lua module • Использует Redis для runtime storage • Поддерживает JSON- и MessagePack-сериализаторы • Поддерживает ряд фич из Advanced Profile 33
- 141. Wiola: WAMP роутер на Lua • Работает на базе Nginx/Lua module • Использует Redis для runtime storage • Поддерживает JSON- и MessagePack-сериализаторы • Поддерживает ряд фич из Advanced Profile • TODO: Raw socket transport • TODO: Meta API • TODO: lua-resty-postgres 33
- 143. Wiola: стек технологий 34 • Nginx или OpenResty, проще говоря lua-nginx-module • lua-resty-websocket • lua-resty-redis • Redis Server • lua-rapidjson • lua-resty-hmac (опционально, нужен для WAMP-CRA) • lua-MessagePack (опционально)
- 144. Wiola: конфиг Nginx 35 location /ws/ { set $wiola_socket_timeout 10; set $wiola_max_payload_len 65535; lua_check_client_abort on; header_filter_by_lua_file /lib/wiola/headers.lua; content_by_lua_file /lib/wiola/handler.lua; }
- 145. Nginx Wiola: Общая схема 36 Web Client init_by_lua headers_filter_by_lua content_by_lua Redis Server
- 149. Wiola: Особенности. JSON • cJSON • нельзя указать способ сериализации пустых таблиц • lua-resty-libcjson 37
- 150. Wiola: Особенности. JSON • cJSON • нельзя указать способ сериализации пустых таблиц • lua-resty-libcjson • не умеет работать с большими числами (int > 32bit) 37
- 151. Wiola: Особенности. JSON • cJSON • нельзя указать способ сериализации пустых таблиц • lua-resty-libcjson • не умеет работать с большими числами (int > 32bit) lua-rapidjson 37
- 152. Wiola: Особенности. JSON • cJSON • нельзя указать способ сериализации пустых таблиц • lua-resty-libcjson • не умеет работать с большими числами (int > 32bit) lua-rapidjson • пока новых проблем не нашлось :) 37
- 156. Wiola: Особенности. Runtime-хранилище 38 • Глобальные переменные в памяти • Создаются каждый раз на request handler • проблемы с concurrent requests
- 157. Wiola: Особенности. Runtime-хранилище 38 • Глобальные переменные в памяти • Создаются каждый раз на request handler • проблемы с concurrent requests • Переменные модуля, загружаемого в init_by_lua
- 158. Wiola: Особенности. Runtime-хранилище 38 • Глобальные переменные в памяти • Создаются каждый раз на request handler • проблемы с concurrent requests • Переменные модуля, загружаемого в init_by_lua • Читать можно во всех воркерах
- 159. Wiola: Особенности. Runtime-хранилище 38 • Глобальные переменные в памяти • Создаются каждый раз на request handler • проблемы с concurrent requests • Переменные модуля, загружаемого в init_by_lua • Читать можно во всех воркерах • Но запись, спасибо CoW, создаст свою копию модуля для VM
- 160. Wiola: Особенности. Runtime-хранилище 38 • Глобальные переменные в памяти • Создаются каждый раз на request handler • проблемы с concurrent requests • Переменные модуля, загружаемого в init_by_lua • Читать можно во всех воркерах • Но запись, спасибо CoW, создаст свою копию модуля для VM • ngx.shared.DICT
- 161. Wiola: Особенности. Runtime-хранилище 38 • Глобальные переменные в памяти • Создаются каждый раз на request handler • проблемы с concurrent requests • Переменные модуля, загружаемого в init_by_lua • Читать можно во всех воркерах • Но запись, спасибо CoW, создаст свою копию модуля для VM • ngx.shared.DICT • Размер каждого словаря задаётся в конфиге и не может изменяться
- 162. Wiola: Особенности. Runtime-хранилище 38 • Глобальные переменные в памяти • Создаются каждый раз на request handler • проблемы с concurrent requests • Переменные модуля, загружаемого в init_by_lua • Читать можно во всех воркерах • Но запись, спасибо CoW, создаст свою копию модуля для VM • ngx.shared.DICT • Размер каждого словаря задаётся в конфиге и не может изменяться Внешнее хранилище: Redis, Memcache, PostgreSQL, MySQL и прочие
- 166. Wiola: Особенности. lua_code_cache 39 • lua_code_cache off; • удобно отлаживать код • каждый require() выполняется заново в каждом запросе
- 167. Wiola: Особенности. lua_code_cache 39 • lua_code_cache off; • удобно отлаживать код • каждый require() выполняется заново в каждом запросе • даже модули, загруженные в init_by_lua, выполняются заново
- 168. Wiola: Особенности. lua_code_cache 39 • lua_code_cache off; • удобно отлаживать код • каждый require() выполняется заново в каждом запросе • даже модули, загруженные в init_by_lua, выполняются заново • lua_code_cache on;
- 169. Wiola: Особенности. lua_code_cache 39 • lua_code_cache off; • удобно отлаживать код • каждый require() выполняется заново в каждом запросе • даже модули, загруженные в init_by_lua, выполняются заново • lua_code_cache on; • для production-окружения
- 170. Wiola: Особенности. lua_code_cache 39 • lua_code_cache off; • удобно отлаживать код • каждый require() выполняется заново в каждом запросе • даже модули, загруженные в init_by_lua, выполняются заново • lua_code_cache on; • для production-окружения • каждый require() выполняется один раз и кэшируется
- 171. Wiola: Особенности. lua_code_cache 39 • lua_code_cache off; • удобно отлаживать код • каждый require() выполняется заново в каждом запросе • даже модули, загруженные в init_by_lua, выполняются заново • lua_code_cache on; • для production-окружения • каждый require() выполняется один раз и кэшируется • при любом изменении кода необходимо перегружать nginx
- 175. Wiola: Публикация в luarocks, opm 40 • luarocks: есть одна часть зависимостей, нет другой: - lua-resty-websocket - lua-resty-redis
- 176. Wiola: Публикация в luarocks, opm 40 • luarocks: есть одна часть зависимостей, нет другой: - lua-resty-websocket - lua-resty-redis ✓ rapidjson
- 177. Wiola: Публикация в luarocks, opm 40 • luarocks: есть одна часть зависимостей, нет другой: - lua-resty-websocket - lua-resty-redis ✓ rapidjson ✓ lua-resty-hmac
- 178. Wiola: Публикация в luarocks, opm 40 • luarocks: есть одна часть зависимостей, нет другой: - lua-resty-websocket - lua-resty-redis ✓ rapidjson ✓ lua-resty-hmac ✓ lua-messagepack
- 179. Wiola: Публикация в luarocks, opm 40 • luarocks: есть одна часть зависимостей, нет другой: - lua-resty-websocket - lua-resty-redis ✓ rapidjson ✓ lua-resty-hmac ✓ lua-messagepack • opm (OpenResty Package Manager): с точностью до «наоборот»:
- 180. Wiola: Публикация в luarocks, opm 40 • luarocks: есть одна часть зависимостей, нет другой: - lua-resty-websocket - lua-resty-redis ✓ rapidjson ✓ lua-resty-hmac ✓ lua-messagepack • opm (OpenResty Package Manager): с точностью до «наоборот»: ✓ lua-resty-websocket
- 181. Wiola: Публикация в luarocks, opm 40 • luarocks: есть одна часть зависимостей, нет другой: - lua-resty-websocket - lua-resty-redis ✓ rapidjson ✓ lua-resty-hmac ✓ lua-messagepack • opm (OpenResty Package Manager): с точностью до «наоборот»: ✓ lua-resty-websocket ✓ lua-resty-redis
- 182. Wiola: Публикация в luarocks, opm 40 • luarocks: есть одна часть зависимостей, нет другой: - lua-resty-websocket - lua-resty-redis ✓ rapidjson ✓ lua-resty-hmac ✓ lua-messagepack • opm (OpenResty Package Manager): с точностью до «наоборот»: ✓ lua-resty-websocket ✓ lua-resty-redis - rapidjson
- 183. Wiola: Публикация в luarocks, opm 40 • luarocks: есть одна часть зависимостей, нет другой: - lua-resty-websocket - lua-resty-redis ✓ rapidjson ✓ lua-resty-hmac ✓ lua-messagepack • opm (OpenResty Package Manager): с точностью до «наоборот»: ✓ lua-resty-websocket ✓ lua-resty-redis - rapidjson ✓ lua-resty-hmac
- 184. Wiola: Публикация в luarocks, opm 40 • luarocks: есть одна часть зависимостей, нет другой: - lua-resty-websocket - lua-resty-redis ✓ rapidjson ✓ lua-resty-hmac ✓ lua-messagepack • opm (OpenResty Package Manager): с точностью до «наоборот»: ✓ lua-resty-websocket ✓ lua-resty-redis - rapidjson ✓ lua-resty-hmac - lua-messagepack
- 186. Полезные ссылки про WAMP • Основной сайт про WAMP: http://wamp-proto.org/ • Спека WAMP на github: github.com/wamp-proto/wamp-proto • Mailing list: https://groups.google.com/forum/#!forum/wampws • Wiola: https://github.com/KSDaemon/wiola • Loowy: https://github.com/KSDaemon/Loowy • Wampy.js: https://github.com/KSDaemon/wampy.js • Wiola docker image: https://hub.docker.com/r/421p/wiola/ • Crossbar Router: https://crossbar.io/ и https://demo.crossbar.io/ 41
- 187. WAMP: Заключение 42
- 190. WAMP: Заключение • Простой и открытый протокол • RPC и PubSub в одном транспорте/протоколе • Любой транспорт и сериализация 42
- 191. WAMP: Заключение • Простой и открытый протокол • RPC и PubSub в одном транспорте/протоколе • Любой транспорт и сериализация • Позволяет строить распределённые приложения со слабосвязанными компонентами 42
- 192. WAMP: Заключение • Простой и открытый протокол • RPC и PubSub в одном транспорте/протоколе • Любой транспорт и сериализация • Позволяет строить распределённые приложения со слабосвязанными компонентами • Есть реализации во многих языках 42
- 193. WAMP: Заключение • Простой и открытый протокол • RPC и PubSub в одном транспорте/протоколе • Любой транспорт и сериализация • Позволяет строить распределённые приложения со слабосвязанными компонентами • Есть реализации во многих языках • Open source 42
- 194. WAMP: Заключение • Простой и открытый протокол • RPC и PubSub в одном транспорте/протоколе • Любой транспорт и сериализация • Позволяет строить распределённые приложения со слабосвязанными компонентами • Есть реализации во многих языках • Open source • Небольшое, но дружелюбное сообщество 42
- 195. WAMP: Заключение 43
- 198. WAMP: Заключение • Полезное архитектурное решение • Отличный вариант для IoT-проекта! (имхо: лучше чем MQTT) • Попробуйте WAMP: 43
- 199. WAMP: Заключение • Полезное архитектурное решение • Отличный вариант для IoT-проекта! (имхо: лучше чем MQTT) • Попробуйте WAMP: • Есть nginx/openresty? — попробуйте Wiola (bit.ly/wiola-router) 43
- 200. WAMP: Заключение • Полезное архитектурное решение • Отличный вариант для IoT-проекта! (имхо: лучше чем MQTT) • Попробуйте WAMP: • Есть nginx/openresty? — попробуйте Wiola (bit.ly/wiola-router) • Используете docker? 43
- 201. WAMP: Заключение • Полезное архитектурное решение • Отличный вариант для IoT-проекта! (имхо: лучше чем MQTT) • Попробуйте WAMP: • Есть nginx/openresty? — попробуйте Wiola (bit.ly/wiola-router) • Используете docker? • docker pull 421p/wiola 43
- 202. WAMP: Заключение • Полезное архитектурное решение • Отличный вариант для IoT-проекта! (имхо: лучше чем MQTT) • Попробуйте WAMP: • Есть nginx/openresty? — попробуйте Wiola (bit.ly/wiola-router) • Используете docker? • docker pull 421p/wiola • docker pull crossbario/crossbar 43
- 203. WAMP: Заключение • Полезное архитектурное решение • Отличный вариант для IoT-проекта! (имхо: лучше чем MQTT) • Попробуйте WAMP: • Есть nginx/openresty? — попробуйте Wiola (bit.ly/wiola-router) • Используете docker? • docker pull 421p/wiola • docker pull crossbario/crossbar • WAMP-клиент на любой вкус и цвет (wamp-proto.org/implementations/) 43
- 204. Спасибо за внимание! И ваши вопросы :) 44 Константин Буркалёв • Mail: kostik@ksdaemon.ru • Twitter: @KSDaemon • GitHub: KSDaemon • Blog: blog.ksdaemon.ru • SDCast: sdcast.ksdaemon.ru