Meetup Liferay-France-User-Group: Résilience avec Hystrix dans Liferay

1. Résilience avec Hystrix dans
Liferay
Quang Tu LE
@qtle linkedin.com/in/quangtule

2. Sommaire
• Contexte
• Besoin
• Conception
• Développement
• Configuration
• Monitoring
• Démo

3. Contexte projet
• Portail intranet du groupe
– +200K d’utilisateurs
– +260 modules, +150 portlets applicatives
– Moteur de recherche d’entreprise
• Connecteur spécifique ( web services)
• +90000 requêtes/jours

4. Besoin
• Refonte de l’interface fonctionnel de module
de recherche -> nombres de requêtes de
recherche risque augmenter!
• Assurer la continuité, la résilience du portail
dans le cas d’indisponibilité du moteur de
recherche

5. Proposition
• Etude de faisabilité d’une solution technique
dans le cadre de l’expertise transverse du
projet
• Evolution transparente pour le métier
• Budget limite(solution logicielle seulement)

6. CircuitBreaker pattern

7. CircuitBreaker closed

8. CircuitBreaker open

9. CircuitBreaker half-open

10. Hystrix
• Projet open source de Netflix
• Implémentation de CircuitBreaker
• Mature, bien documenté
• Solution complète (pool de threads, config à
chaud, monitoring,…)

11. Refactoring pour intégrer Hystrix

12. Développement – sans Hystrix

13. Développement – avec Hystrix

14. Développement –HystrixCommand

15. Configuration
• 4 niveaux
1. Global default from code
2. Dynamic global default property
• hystrix.command.default.execution.isolation.thread.ti
meoutInMilliseconds
3. Instance default from code
4. Dynamic instance property
• hystrix.command.HystrixCommandKey.execution.isol
ation.thread.timeoutInMilliseconds
• Archaius - charger les configs à chaud

16. archaius.properties

17. archaius.properties
• Charger fichier archaius.properties dans
Tomcat
– setenv.sh

18. Déploiement-Dépendances
• Utiliser les jars supportés OSGI
– guava-19.0.jar
– HdrHistogram-2.1.10.jar
– jackson-annotations-2.9.8.jar
– jackson-core-2.9.8.jar
– jackson-databind-2.9.8.jar
– jackson-annotations-2.9.8.jar
– jackson-core-2.9.8.jar
– jackson-databind-2.9.8.jar
– org.apache.servicemix.bundles.archaius-core-0.6.5_1.jar
– org.apache.servicemix.bundles.commons-configuration-1.9_2.jar
– org.apache.servicemix.bundles.hystrix-1.5.18_1.jar
– rxjava-1.2.2.jar

19. Monitoring
• Hystrix Dashboard
– Standalone webapp
– https://github.com/Netflix-Skunkworks/hystrix-
dashboard/wiki
– Migrer en portlet?
– Il faut combiner avec Turbine pour le mode
clustering

20. Monitoring
• Metrics Publisher Plugin
– HystrixMetricsPublisher
– hystrix-servo-metrics-publisher
• https://github.com/Netflix/Hystrix/tree/master/hystrix-
contrib/hystrix-servo-metrics-publisher
• Metriques exposé via JMX
• Dashboad JMX dans Dynatrace

21. hystrix-servo-metrics-publisher

22. Monitoring

23. Monitoring

24. Démo

25. REX
• Refactoring avant d’intégrer Hystrix
• Chargement de la configuration à chaud avec
Archaius
• Monitoring pour tuner les configurations

26. Liens
• https://github.com/Netflix/Hystrix/wiki/How-it-Works
• https://github.com/Netflix/Hystrix/wiki/How-To-Use
• https://github.com/Netflix/Hystrix/wiki/Configuration
• https://github.com/Netflix/archaius/wiki/Getting-
Started#using-a-local-file-as-the-configuration-source
• https://github.com/Netflix/Hystrix/wiki/Metrics-and-
Monitoring
• https://github.com/Netflix/Hystrix/tree/master/hystrix-
contrib/hystrix-servo-metrics-publisher

27. Merci!
Q&A

28. Aller plus loin
• Adaptive concurrency limits
– https://github.com/Netflix/concurrency-limits
• https://github.com/resilience4j/resilience4j
– CircuitBreaker (Disjoncteur)
– RateLimiter (Limitation de débit )
– Retry (Retentative)
– Bulkhead (cloisonnement)