Activeeon est un éditeur de logicels open source permettant de répondre aux problématiques suivantes: orchestration IT du big data et de machine learning, création de workflows, planification et contôle de l'exécution de jobs, passage à l'échelle de l'infrastructure informatique, monitoring et migration cloud.
Découvrez les avantages de la solution ProActive et les cas d'utilisation clients.
Contactez Activeeon
Site web: https://www.activeeon.com/
Plateforme d'essai: https://try.activeeon.com/
LinkedIn: https://www.linkedin.com/company/activeeon/
Twitter: https://twitter.com/activeeon
contact@activeeon.com
http://www.brownbaglunch.fr/baggers.html#Olivier_BAZOUD
Monitoring: regarder votre application à la loupe!
Regarder fonctionner votre application sous toutes les coutures.
Nous verrons comment alimenter Graphite, un excellent outil de métrologie, dans une architecture java (je peux m'adapter à vote langage): collectd, jmxtrans, metrics, statsd,.. afin de prendre des mesures au niveau du système, de l'applicatif, des batchs et du métier (KPI). Nous aborderons ensuite la corrélation tous ces métriques de façon très visuelle et comment réveiller vos sysadmins en cas d'urgence ;)
S.M.A.C.K, Spark-Mesos-Akka-Cassandra-Kafka, fait partie des nouvelles générations d’architectures “BigData” open source proposant une alternative et / ou une complémentarité à Hadoop / Map-Reduce.
À la différence the Hadoop / Map-Reduce qui fournit une architecture permettant de paralléliser les I/O disque et réseau, S.M.A.C.K utilise d’avantage la mémoire ce qui permet de libérer les CPUs des tâches de I/O et ainsi augmenter les capacités de calcul pour un même cluster. L’architecture S.M.A.C.K, et Spark en particulier, est particulièrement plébiscitée par la communauté autour de la Data Science.
Il s’agit d’une architecture ”BigData” très populaire qui se trouve être un assemblage de services spécialisés à la différence d’une solution unique implémentant une liste de patterns et principes ce qui lui apporte une grande flexibilité mais également une certaine complexité.
Apache Cassandra - Concepts et fonctionnalitésRomain Hardouin
Apache Cassandra - Concepts et fonctionnalités, 25/02/2014
Présentation de Cassandra pour le premier évènement "Lyon Cassandra Users" (organisé par DataStax & Zenika).
* Présentation de Cassandra
* Concepts clés (Théorie & Architecture)
* Installation
* Les outils DataStax : DevCenter et OpsCenter
* Modèle de données
* Requêtes
Introduction à Apache Cassandra — IppEvent chez OVH 2017-03-02Jérôme Mainaud
Découvrez au cours de cette présentation le fonctionnement de la base de données Cassandra.
- Qu'est-ce que Cassandra ?
- Pourquoi l'utiliser ?
- Comment l'utiliser ?
- Comment la mettre en œuvre ?
Cette présentation a été jouée lors de l'IppEvent qui a eu lieu le 2017-03-02 dans les locaux d'OVH Lyon. Elle fait partir du temps fort Big Data 2017 https://blog.ippon.fr/2017/03/01/un-mois-de-mars-100-big-data/.
Merci à l'équipe d'OVH pour son accueil chaleureux.
http://www.brownbaglunch.fr/baggers.html#Olivier_BAZOUD
Monitoring: regarder votre application à la loupe!
Regarder fonctionner votre application sous toutes les coutures.
Nous verrons comment alimenter Graphite, un excellent outil de métrologie, dans une architecture java (je peux m'adapter à vote langage): collectd, jmxtrans, metrics, statsd,.. afin de prendre des mesures au niveau du système, de l'applicatif, des batchs et du métier (KPI). Nous aborderons ensuite la corrélation tous ces métriques de façon très visuelle et comment réveiller vos sysadmins en cas d'urgence ;)
S.M.A.C.K, Spark-Mesos-Akka-Cassandra-Kafka, fait partie des nouvelles générations d’architectures “BigData” open source proposant une alternative et / ou une complémentarité à Hadoop / Map-Reduce.
À la différence the Hadoop / Map-Reduce qui fournit une architecture permettant de paralléliser les I/O disque et réseau, S.M.A.C.K utilise d’avantage la mémoire ce qui permet de libérer les CPUs des tâches de I/O et ainsi augmenter les capacités de calcul pour un même cluster. L’architecture S.M.A.C.K, et Spark en particulier, est particulièrement plébiscitée par la communauté autour de la Data Science.
Il s’agit d’une architecture ”BigData” très populaire qui se trouve être un assemblage de services spécialisés à la différence d’une solution unique implémentant une liste de patterns et principes ce qui lui apporte une grande flexibilité mais également une certaine complexité.
Apache Cassandra - Concepts et fonctionnalitésRomain Hardouin
Apache Cassandra - Concepts et fonctionnalités, 25/02/2014
Présentation de Cassandra pour le premier évènement "Lyon Cassandra Users" (organisé par DataStax & Zenika).
* Présentation de Cassandra
* Concepts clés (Théorie & Architecture)
* Installation
* Les outils DataStax : DevCenter et OpsCenter
* Modèle de données
* Requêtes
Introduction à Apache Cassandra — IppEvent chez OVH 2017-03-02Jérôme Mainaud
Découvrez au cours de cette présentation le fonctionnement de la base de données Cassandra.
- Qu'est-ce que Cassandra ?
- Pourquoi l'utiliser ?
- Comment l'utiliser ?
- Comment la mettre en œuvre ?
Cette présentation a été jouée lors de l'IppEvent qui a eu lieu le 2017-03-02 dans les locaux d'OVH Lyon. Elle fait partir du temps fort Big Data 2017 https://blog.ippon.fr/2017/03/01/un-mois-de-mars-100-big-data/.
Merci à l'équipe d'OVH pour son accueil chaleureux.
Notre voyage vers le déploiement continu avec micro-services, la conteneurisation et l'orchestration des conteneurs utilisant Kubernetes. Sur notre chemin, nous avons dû créer divers outils pour nous aider à mieux utiliser et tester le tout avant d'aller en production. Nous avons également intégré une variété d'autres outils pour nous donner de la visibilité sur notre plate-forme. Cette conférence sera un aperçu de notre voyage jusqu'à maintenant.
Our journey towards continuous deployment with micro-services, containerization and orchestration of containers using Kubernetes. On our way there, we've had to create various tools to help us better use and test everything before going to production. We also had to integrate a variety of other tools to give us visibility on our platform.
This talk will be an overview of our journey up to now.
Développer et déployer une Spring Cloud Function dans AWS Lambda en moins de 15 minutes !
Prez:
https://www.youtube.com/watch?v=QDJ4UTHivM0
Code:
https://github.com/sebastienmoreno/spring-function-bdxio
Comment passer d'un POC en prod @ plusieurs milliards de rêquetesCarles Sistare
Ogury est la plateforme de data mobile qui permet d’accéder aux données comportementales des profils de plus de 400 millions de mobinautes répartis dans plus de 120 pays. Monter une stack haute fréquence n’est pas facile, David et Carles vous parleront de leur retour d'expérience.
Durant cette présentation, Carles et David vous propose de revivre avec eux l’évolution de l’architecture d’Ogury. D’un POC monolite à une architecture micro-service orienté perf, constituée des 700 instances chez AWS.
Cassandra s'impose chez Chronopost comme base NoSQL de choix pour remplacer les RDBMS traditionnels.
Pourquoi choisir Cassandra dans la jungle du Big Data, pour quels usages et quels gains en tirer.
Le projet OpenStack vise à créer une plate-forme open source Cloud computing, pour les Clouds publics et privés visant une évolutivité sans complexité. OpenStack est composé d'un certain nombre de composants libres qui forment ensemble une solution Cloud.
La NASA et Rackspace ont été les initiateurs de ce projet. Des grands noms du monde informatique se sont joints au projet tel que IBM, Dell, Canonical, Cisco, … etc. La mutualisation des efforts de développement ont fait du projet OpenStack l'un des projet les plus émergent, avec une release chaque 6 mois.
Développez votre application Facebook avec Windows AzureMicrosoft
Les applications Facebook peuvent plus que les autres être soumises à de fortes bouffées de succès viral. Il est donc primordial de les héberger sur un cloud. Venez voir la simplicité de mise en oeuvre sur la plateforme Windows Azure.
Administration et supervision depuis le Cloud avec Azure Logs AnalyticsMicrosoft
Azure Log Analytics est un service d’Operations Management Suite (OMS) qui vous permet de collecter et d’analyser les données générées par les ressources de votre Cloud et de vos environnements locaux. Il vous fournit des informations en temps réel à l'aide d’une recherche intégrée et de tableaux de bord personnalisés permettant d’analyser facilement des millions d'enregistrements. Cette session sera l'occasion de découvrir ce service.
Tech daysRetour d’expérience Big Compute & HPC sur Windows Azure [TechDays 2014]ANEO
Le cloud est-il adapté aux besoins du calcul hautes performances ? La réponse par l’expérience : les consultants HPC d'ANEO ont porté et optimisé une application scientifique distribuée développée par Supélec depuis leur cluster Linux vers la nouvelle offre de cloud Microsoft, Big Compute (nœuds reliés en InfiniBand).
USI 2013 : 7 changements nécessaires pour sauver vos SI décisionnelsJoseph Glorieux
Présentation de ma session à l'USI 2013 : www.usievents.com
Les principes des architectures décisionnelles ont... 20 ans.
Si on peut leur souhaiter de vivre aussi longtemps que le mainframe, il va être nécessaire de s’adapter à un contexte riche en changement :
- L'explosion de la volumétrie, des usages, de la diversité, l'instantanéité, bref Big Data
- La réduction du time to market dans un contexte de baisse du budget
- La volonté d'indépendance des utilisateurs et des métiers
- Le raz de marée apporté par de nouveaux paradigmes et solutions (NoSQL, in memory, dataviz, R....)
Ce que je propose donc dans cette session c'est un petit guide de survie en 7 points touchant aussi bien à l'architecture, qu'aux pratiques de développements ou à l'organisation.
Mon objectif est de redonner de l'espoir, ou au moins de faire persister encore quelques années les systèmes d'information décisionnels afin de fêter les noces de perles !!
Notre voyage vers le déploiement continu avec micro-services, la conteneurisation et l'orchestration des conteneurs utilisant Kubernetes. Sur notre chemin, nous avons dû créer divers outils pour nous aider à mieux utiliser et tester le tout avant d'aller en production. Nous avons également intégré une variété d'autres outils pour nous donner de la visibilité sur notre plate-forme. Cette conférence sera un aperçu de notre voyage jusqu'à maintenant.
Our journey towards continuous deployment with micro-services, containerization and orchestration of containers using Kubernetes. On our way there, we've had to create various tools to help us better use and test everything before going to production. We also had to integrate a variety of other tools to give us visibility on our platform.
This talk will be an overview of our journey up to now.
Développer et déployer une Spring Cloud Function dans AWS Lambda en moins de 15 minutes !
Prez:
https://www.youtube.com/watch?v=QDJ4UTHivM0
Code:
https://github.com/sebastienmoreno/spring-function-bdxio
Comment passer d'un POC en prod @ plusieurs milliards de rêquetesCarles Sistare
Ogury est la plateforme de data mobile qui permet d’accéder aux données comportementales des profils de plus de 400 millions de mobinautes répartis dans plus de 120 pays. Monter une stack haute fréquence n’est pas facile, David et Carles vous parleront de leur retour d'expérience.
Durant cette présentation, Carles et David vous propose de revivre avec eux l’évolution de l’architecture d’Ogury. D’un POC monolite à une architecture micro-service orienté perf, constituée des 700 instances chez AWS.
Cassandra s'impose chez Chronopost comme base NoSQL de choix pour remplacer les RDBMS traditionnels.
Pourquoi choisir Cassandra dans la jungle du Big Data, pour quels usages et quels gains en tirer.
Le projet OpenStack vise à créer une plate-forme open source Cloud computing, pour les Clouds publics et privés visant une évolutivité sans complexité. OpenStack est composé d'un certain nombre de composants libres qui forment ensemble une solution Cloud.
La NASA et Rackspace ont été les initiateurs de ce projet. Des grands noms du monde informatique se sont joints au projet tel que IBM, Dell, Canonical, Cisco, … etc. La mutualisation des efforts de développement ont fait du projet OpenStack l'un des projet les plus émergent, avec une release chaque 6 mois.
Développez votre application Facebook avec Windows AzureMicrosoft
Les applications Facebook peuvent plus que les autres être soumises à de fortes bouffées de succès viral. Il est donc primordial de les héberger sur un cloud. Venez voir la simplicité de mise en oeuvre sur la plateforme Windows Azure.
Administration et supervision depuis le Cloud avec Azure Logs AnalyticsMicrosoft
Azure Log Analytics est un service d’Operations Management Suite (OMS) qui vous permet de collecter et d’analyser les données générées par les ressources de votre Cloud et de vos environnements locaux. Il vous fournit des informations en temps réel à l'aide d’une recherche intégrée et de tableaux de bord personnalisés permettant d’analyser facilement des millions d'enregistrements. Cette session sera l'occasion de découvrir ce service.
Tech daysRetour d’expérience Big Compute & HPC sur Windows Azure [TechDays 2014]ANEO
Le cloud est-il adapté aux besoins du calcul hautes performances ? La réponse par l’expérience : les consultants HPC d'ANEO ont porté et optimisé une application scientifique distribuée développée par Supélec depuis leur cluster Linux vers la nouvelle offre de cloud Microsoft, Big Compute (nœuds reliés en InfiniBand).
USI 2013 : 7 changements nécessaires pour sauver vos SI décisionnelsJoseph Glorieux
Présentation de ma session à l'USI 2013 : www.usievents.com
Les principes des architectures décisionnelles ont... 20 ans.
Si on peut leur souhaiter de vivre aussi longtemps que le mainframe, il va être nécessaire de s’adapter à un contexte riche en changement :
- L'explosion de la volumétrie, des usages, de la diversité, l'instantanéité, bref Big Data
- La réduction du time to market dans un contexte de baisse du budget
- La volonté d'indépendance des utilisateurs et des métiers
- Le raz de marée apporté par de nouveaux paradigmes et solutions (NoSQL, in memory, dataviz, R....)
Ce que je propose donc dans cette session c'est un petit guide de survie en 7 points touchant aussi bien à l'architecture, qu'aux pratiques de développements ou à l'organisation.
Mon objectif est de redonner de l'espoir, ou au moins de faire persister encore quelques années les systèmes d'information décisionnels afin de fêter les noces de perles !!
Le cloud-in-a-box avec Cloud Platform System (CPS) et Windows Azure PackMicrosoft Décideurs IT
Microsoft apporte son expérience dans la conception et la gestion des centres de données et du cloud avec un système convergent entièrement validé et intégré en usine. CPS associe une pile logicielle éprouvée avec Windows Server 2012 R2 et System Center 2012 R2, le portail Windows Azure Pack et les infrastructures serveurs, stockage et équipements réseau de DELL. Basé sur un bloc de construction évolutif et extensible, CPS raccourcit le temps de mise en œuvre tout en proposant une expérience cohérente du cloud telle que demandée par vos métiers.
Cette session est destinée à vous présenter des retours d’expériences de solutions cloud pour rendre votre IT plus agile. Cette session animée et interactive vous permettra de découvrir plusieurs solutions que vous pourrez intégrer progressivement.
Retour d'expérience : rendre votre IT agile grâce au cloud hybrideMicrosoft Décideurs IT
Cette session est destinée à vous présenter des retours d’expériences de solutions cloud pour rendre votre IT plus agile. Cette session animée et interactive vous permettra de découvrir plusieurs solutions que vous pourrez intégrer progressivement.
Different usages of Machine Learning Open StudioActiveeon
Machine Learning Open Studio from Activeeon has been designed for different types of users to build machine learning pipelines and meet their profession-specific needs : non-AI engineers, data analysts, data scientists, AI architects.
Workload Automation for Cloud Migration and Machine Learning PlatformActiveeon
Activeeon has developed two Innovative Solutions based on workflows for:
1. Workload Automation for Cloud Migration
2. Data Science and Machine Learning Platform
Activeeon technology for Big Compute and cloud migrationActiveeon
Activeeon is a key technology provider and actor in the cloud migration. Activeeon offers software and middleware solutions for Big Compute, workload automation and HPC. The company also provides workflows solutions for Machine Learning & IA.
Machine Learning open studio solution for data scientists & developersActiveeon
Machine Learning Open Studio (ML-OS) is an interactive graphical interface that enables developers and data scientists to quickly and easily build, train, and deploy machine learning models at any scale. It provides a rich set of generic machine learning tasks that can be connected together to build either basic or complex machine learning workflows for various use cases such as: fraud detection, text analysis, online offer recommendations, prediction of equipment failures, facial expression analysis, etc. These tasks are open source and can be easily customized according to your needs. ML-OS can schedule and orchestrate executions while optimising the use of computational resources. Usage of resources (e.g. CPU, GPU, local, remote nodes) can be easily monitored.
Infinite power at your fingertips with Microsoft Azure Cloud & ActiveEonActiveeon
Joint talk Microsoft-ActiveEon at Cloud Expo Europe, Big Data Analytics and Cloud management theater. Presenters: Christopher Plieger, Microsoft Azure Product Marketing Manager, and Denis Caromel , CEO - ActiveEon
This document provides an overview of machine learning and deep learning techniques. It defines machine learning as a field that gives computers the ability to learn without being explicitly programmed. It also describes different machine learning algorithms including supervised learning techniques like classification and regression, and unsupervised learning techniques like clustering. Deep learning techniques using neural networks for applications such as computer vision and natural language processing are also overviewed. Resources for implementing machine learning and deep learning in Python are provided.
Activeeon use cases for cloud, digital transformation, IoT and big data autom...Activeeon
Activeeon is a company founded in 2007 that provides cloud automation, workflow scheduling, and big data automation software. It addresses the $80 billion hybrid cloud market and has offices in France, the UK, US, and Senegal. The company's patented ProActive Solution automates workload scheduling, service lifecycles, and accelerates tasks like R, Spark, and Hadoop across various cloud and on-premise environments. ProActive Workflows improves return on investment by optimizing resource usage and prioritizing tasks. Activeeon has large enterprise customers and its technology helps companies accelerate calculations for risk management, banking, and other industries.
ActiveEon is a spin-off from INRIA, French Institute for Computer Science. The core technology of ActiveEon was initially developed by a team of about 40 developers and researchers, and has been heavily improved since by ActiveEon R&D team. ActiveEon is also a Docker member and was laureate of the IT Forum for Innovation prize in 2016.
ActiveEon has recently raised significant fund (1M euros) from local and foreign investors: PACA Investissement, BA06, Nestadio Capital, and Kima Ventures, Xavier Niel’s fund).
ActiveEon is now an Open Source ISV (Independent Software Vendor) providing innovative solutions for IT automation, acceleration and scalability, Big Data, Internet of Things, Distributed and parallel applications. ActiveEon offers ProActive, a software available in SaaS mode, both in the Cloud and on premises:
• ProActive Workflows & Scheduling: a complete workload scheduler that distributes and simplifies the execution of applications, featuring a workflow orchestrator and a resources manager.
• ProActive Parallel Scientific Toolbox: toolboxes that allow the distribution and the acceleration of Matlab, Scilab and R Language on Clusters, Grids or Clouds, also featuring data transfer and License cost optimization.
• ProActive Cloud Automation: automates the deployment and management of complex multi-VMs applications, manages heterogeneous and hybrid environments (multi-vendor private, public and hybrid clouds).
1. ProActive Workflows & Scheduling
Collecteur & analyseur de données
as a Service et multi-plateforme
Activeeon
2. Orchestration : Big Data, lA & ML
Planification et contrôle de
l’exécution de jobs
Gestion des erreurs
Récupération de noeuds
Priorités dynamiques de jobs
Planification d’évènements
Calendriers inclusif et exclusif
Monitoring
Surveillance d’exécution de jobs en
temps réel
Monitoring des ressources
Récupération de logs
GOUVERNANCE OPERATIONNELLE CONCU POUR TOUS
on-prem
Création de workflows
Interface utilisateur intuitive
Gestion des dépendances de workflows avec
drag & drop
“Bring your own code”, pas de librairies
supplémentaires
Plus de 15 langages supportés
Assemblage de tâches “white-box”
Serverless opérationnel
Scalabilité
20k+ coeurs CPU
Parallélisation & distribution
PACKAGED SOLUTION
SOLUTION CLE EN MAIN
GESTION COMPLETE
Open Source
3. Scheduler nouvelle génération
</>
APIInterfaces spécifiques Portails web intégrés
Workflows ProActive
Big Data, Data Science,
Logiciels tiersScheduler / Ordonnanceur
Resource Manager
Tolérance aux
erreurs et pannes
Débordement cloud
Agnostique aux
ressources
Micro-services
Orchestration Multi-Cloud
Meta-scheduling
Allocation de ressources de
calcul
Workflows automatisés
LSF
Clusters Scheduler Cloud Local
4. Resources
• Monitoring
Vue globale des workloads
Vue unifiée des ressources
• Gestion des erreurs intégrée
• Plug-ins Clouds récents
• Politique de ressources avancée
pour une optimisation des coûts
• Workflows standards et génériques
• Rest API, Docker, K8s, Job planner,
intégration avec les calendriers
Gouvernance en Production
Ordonnanceur / Meta-Ordonnanceur
Resource Manager
Interface utilisateur unifiée
VMBare metal Industrialisation &
Operationnalisation des
Workloads
5. Plateforme d’écosystème multi-cloud
Gestion de cycles de vie
Resource Management
Stockage
…
Connectez
Intégrez
Traitez
& Gérez
Orchestrez
Analysez
Automatisez
Contrôlez
Calcul
…
Services & Apps </>
…
6. Elasticité des ressources de calcul
Déploiement incrémental
de ressources
Utilisation de 100%
ressources
Ajustement automatique de la taille de
l'infrastructure en fonction de la charge
Fournit la puissance de calcul cloud en fonction de vos besoins.
Minimise les coûts grâce au déploiement de machines virtuelles
seulement si necessaire (charge configurable). Soyez sûr de ne
jamais excéder votre budget (nombre de VMs min/max).
Politique d’élasticité intelligente et entièrement configurable. Les
VMs non-utilisées peuvent être supprimées dès que possible.
Vous pouvez également libérer les ressources non-utilisées en
différé afin d’éviter les redéploiements à répétition.
7. Machine Learning Open Studio
Compatible Docker
Librairies Machine Learning
Deep Learning
Visualisation en temps réel
avec Visdom, etc.
Catalogue pour le partage &
production (DevOps)
Gestion de montée en charge
avec l’exécution parallèle et
distribuée
LearningData Prédiction
Visdom
Palettes pour AI, ML, DML
Configurables ou prédéfinies
8. Global Locations
Langages et Connecteurs Supportés
AWSAzure GCP Docker OpenShiftLinux Windows Solaris VMware Openstack
Infrastructure
Slurm PBS LSF
LSF
HPC Schedulers
Google
Cloud Platform
PBS
Works
Cmd Java Scala Javascript Groovy Ruby Jython Python Perle PHP R Cron LDAPPowerShell
Languages and Predefined Tasks
FTPURL SFTP MySQL Oracle
Data Connectors
Linux Bash
MongoDB Cassandra AWS-S3
Clouds
PostgreSQL Greenplum SQL Server Azure Storage
Azure
Data Lake
KafkaZookeeper Spark Hadoop
Big Data
Azure
Databricks Hadoop HDFS Twitter
LogstashSAP Elasticsearch
SGE
SGE
CNTK Keras PyTorch YOLO H2OTensoFlow
Machine Learning & Artificial Intelligence
Caffe Spark MLlib Pandas JupyterLab
Visdom
Visualization
KibanaSwarm Storm Clearwater
Cognitive
Services
Grafana
Scikit-Learn MXNet
AIX AS/400
C++/C#
Cuda
Specialized
Open/CL FPGA
DLib BigDL
DeepLearning
G4J
Kubernetes
9. Implantation mondiale
Partenariats
Informations-clés
Management
Denis
Caromel,
CEO
François
Tournesac,
CSO
Brian
Amedro,
CTO
A propos d’Activeeon
Créée en 2007 par Denis Caromel à Sophia-Antipolis, spin-off de l’INRIA
S’adresse au marché du Cloud Hybride de $80 milliards avec 27% de TCAC
Technologie disruptive brevetée
60% du CA de l’international
Sophia-Antipolis (France)
Paris (France)
London (Royaume-Uni)
San-Jose (Les Etats-Unis)
Montréal (Canada)
Dakar (Sénégal)
Solution ProActive
Job Scheduling, Workload Automation
Orchestration & Meta-Scheduling
On-premises et sur tous les clouds
Open Source
11. Execution
prod
Analytical
prod
Staging Dev
Infrastructure virtualisée avec Docker
4000 coeurs
Bénéfices-clés
Outil d’orchestration centralisée
Expressivité des workflows :
outil universel & intuitif
Management de la sécurité pour des
environnements sensibles
Management de ressources pour tout
type de système (SAS, GREENPLUM)« The only
solution capable
to Schedule any
Big Data
Analytics, mono-
threaded, multi-
threaded, multi-
core, parallel and
distributed »
Cap Gemini Lead
Engineer for
Home Office
Meta-Scheduler, Big Data ETL & ELT
13. Mise à disposition gratuite des produits des satellites Sentinel, S1A,
S1B, S2A et S2B, S3A et S3B de COPERNICUS, système européen
pour l’observation de la Terre.
Accès gratuit, multi-capteur (radar, optique, etc.),
haute fréquence, projet long terme.
1 PB en 20 ans et 7 PB en 2 ans! 10 TB/jour
PEPS
Plateforme d’Exploitation
des Produits Sentinel
14. Nouvelles interfaces
- Portails web
personnalisés
- Connecteur WPS
- Plate-forme ouverte
- Rest API
Intégration de
connecteurs
- Amélioration du stockage
avec Scality
- Azure Scale Set pour des
stratégies de ressources
avancées
Plateforme Kubernetes
- Utilisation de Kubernetes
comme fournisseur de
ressources
16. Intégration avec la plateforme CIVA (Ultrason multi-technique,
Courants de Foucault, Radiographie, ...)
Programmation d’évènements pour le suivi d’éxécution
x30 plus rapide pour les variations paramétriques
Lancez de grands calculs POD (Probability of Detection) qui
pourraient durer des mois avec un seul ordinateur.
CIVA
Traitement batch NDT (Test non-destructi
études paramétriques et tests non-
régressifs sur clusters multiples
Un PC Cluster SGI
Octane III
Cluster Dell Cloud
Temps de calcul 100h 4h26 min 3h08 min <2h
Temps de transfert
de données
x 6 mn 6 mn 2h
Temps total 100h 4h32 min 3h14 min 4h
17. Komatsu est une société multinationale japonaise
Elle produit des équipements de construction, d’exploration minière, industriels et militaires.
Besoin
Orchestrer l’exécution sur les espaces de stockages à froid et chaud pour le streaming et analytiques batch
> 1,200 tâches exécutées par heure
Solution
La solution ProActive d’Activeeon a permis de contrôler le scheduling de l’exécution :
• Gestion des Erreurs – Notifications, Récupération
• Job Planner
• Distribution & Parallélisation
Bénéfices
Exécution fiable pour l’orchestration de différents services et ressources
Fournit des résultats et KPIs cohérents aux utilisateurs finaux et outils de BI
Plateforme d’Analytiques IoT
20. Coup d’oeil sur l’architecture
Portail web et integration des outils
scientifiques
Total
ADN Préparation de QC/Library
Proton/Illumina
Sequençage
1.3PB
DataBase
Analyse
1TB / Sequence
Windows
Cluster 1
192 coeurs
Linux
Cluster 2
366 coeurs
Pre- et post-traitement de l’analyse de
données
Flexibilité, Vitesse d’Analyse
Exécution granulaire
Distribution pour une execution rapide
Transfert de données sécurisé
Plateforme de métagénomique
quantitative pour profilage de
gènes et analyse statistique
On-Prem
Coeurs CPU à la demande
Débordement
REST / HTTPS
Transfert de données sécurisé
22. Télécharger le livre blanc
https://www.activeeon.com/doc-empower-businesses-with-big-
compute-fr
ou
https://bit.ly/2yqhznw
Nous contacter :
www.activeeon.com
contact@activeeon.com
09 88 77 76 60
Notes de l'éditeur
To best fit business line needs, Activeeon provides orchestration through the various IT components:
Services & Apps,
Compute,
Storage.
It connects, integrate and manage the different resources through various modules such as a Resource Manager, Automation Dashboard for Services, etc.