Hardware Lab. Andrew Kokhanovskyi. Kaa introduction

•

2 j'aime•1,528 vues

09.07.2015 Odessa Innovation Week, Hardware Lab Andrew Kokhanovskyi (CTO, CyberVision, Inc.) Kaa introduction Подробнее: http://geekslab.co, http://oiw.in.ua https://www.facebook.com/GeeksLab.co , https://www.facebook.com/OdessaInnovationWeek https://www.youtube.com/user/GeeksLabVideo

Technologie

Introduction
Andrew Kokhanovskyi
CTO, CyberVision, Inc.
@akokhanovskyi
kaaproject.org© 2015 CyberVision, Inc. All rights reserved.

kaaproject.org© 2015 CyberVision, Inc. All rights reserved.

© 2015 CyberVision, Inc. All rights reserved.
Administration
UI
REST API
Group B Group C
Notification Configuration
ConfigurationNotification
kaaproject.org
Kaa cluster
Device management (notifications and data distribution)

User A
Application BApplication A
© 2015 CyberVision, Inc. All rights reserved.
Events
Messaging (events system)
kaaproject.org
Kaa cluster

© 2015 CyberVision, Inc. All rights reserved.
Analytics System
Data
Data
Data collection (logging)
Kaa cluster
kaaproject.org

The secret sauce:
structured data e2e
kaaproject.org© 2015 CyberVision, Inc. All rights reserved.

© 2015 CyberVision, Inc. All rights reserved.
Zookeeper
quorum
Endpoints
Control
servers
standby
Bootstrap
servers
Operations
servers
Fault-tolerance and horizontal scalability
kaaproject.org
active

Security
© 2015 CyberVision, Inc. All rights reserved.
Zookeeper
quorum
Endpoints
Bootstrap
server
Operations
server
Mutual Auth
(two-way authentication
based on RSA signatures +
AES session keys)
Firewall Kerberos or
mutual (two-way) SSL
for server auth
kaaproject.org
Control
server

© 2015 CyberVision, Inc. All rights reserved.
HTTPUDP TCP Web sockets Custom
Cloud
support
DB support
REST
API
Integration
Data ingestion
REST API
SSL CoAP MQTT
kaaproject.org

© 2015 CyberVision, Inc. All rights reserved.
Memory usage
Operations at 80% CPU utilization
1 node 2 nodes 4 nodes 16 nodes
Notifications /
sec
45 k 86 k 173k 710 k
Configuration
updates / sec
30 k 58 k 122 k 465 k
Events / sec 120 k 150 k 410 k 1 500 k
Endpoint count 100 k 200 k 400 k 800 k
RAM usage 2Gb 3Gb 5Gb 9.5Gb
Key performance indicators
kaaproject.org

© 2015 CyberVision, Inc. All rights reserved. kaaproject.org

Andrew Kokhanovskyi, CTO, CyberVision
ak@cybervisiontech.com
kaaproject.org
cybervisiontech.com
THANK YOU FOR YOUR ATTENTION

Contenu connexe

Tendances

apidays LIVE New York 2021 - OWASP cautions against “insufficient logging & m...

apidays

apidays LIVE New York 2021 - Solving API security through holistic obervabili...

apidays

Data in Motion - tech-intro-for-paris-hackathon

Cisco DevNet

eIoT-tech-intro-for-paris-hackathon

Cisco DevNet

Driving the next wave of innovation, the 'Internet of Things (IoT)' phenomenon is picking up speed. IoT is generating new evolving data and desperately needs computational resources for creating revolutionary IoT applications. An IoT application at the core needs to be able to combine the services offered by multiple applications and scale up to handle huge number of users in reliable manner. And this is where Cloud computing plays a significant role Cloud computing with its agility, high availability and performance promises an exponential leap in the emerging era of connected world. In fact, cloud computing has the necessary potential to address the needs of an IoT application architecture. Thank you for joining us for this insightful webinar 'Cloudification for Internet of Things - The Road Ahead' on 25th June 2014. Attendees got insight on the Internet of Things technology and its architecture, followed by a functional model on how cloud can support IoT ecosystem. WEBINAR KEY TAKEAWAYS: 1- Distinction between the development, design and architecture of an IoT application with that of an enterprise application 2- The different technology options available to develop an IoT application 3- The utility of cloud computing as a platform to build an IoT application 4- Enhancements needed in the cloud computing platform to meet IoT application requirements 5- Case study walkthrough

CLOUDIFICATION FOR INTERNET OF THINGS - THE ROAD AHEAD

Harbinger Systems - HRTech Builder of Choice

WSO2Con USA 2015: WSO2 Platform for IoT

WSO2

By now you are likely familiar with Cloud Access Security Brokers (CASBs) and understand how they fit into your broader security and cloud strategy. What should organizations be looking for in a CASB? What capabilities are here or on the horizon that can provide improved data protection in the cloud? Bitglass and (ISC)2 presents the final episode of the CASB series where we will examine where cloud security is headed, discussing agentless and agent-based solutions, the growing number of cloud apps in use and the importance of easy deployment. Learn why cross-app security will become increasingly valuable as organizations look to third-party solutions for deep visibility, behavior analytics, and more.

The Future of CASBs - A Cloud Security Force Awakens

Bitglass

Great! You completed your connected object design and now, you need to figure out how to gather, store and analyze all that telemetry. In this presentation, we’ll take a look at how you can use Microsoft Azure to do just that. We’ll first see how you can “pick and choose” services that you can combine to build your own custom solution. Services like Event Hub that can receive millions of events per second, Stream Analytics that let you perform real-time analytics on those millions of events, Machine Learning that let you do predictive analytics and Power BI that let you display data in super neat graphs. Then we’ll look at Azure IoT Hub and its benefits compared to Event Hub. Finally, we’ll see how Azure IoT Suite let you quickly start using preconfigured solutions.

Connecting IoT devices to Azure

Guy Barrette

apidays LIVE New York 2021 - API Management from a network Engineer's perspec...

apidays

Building Resilient Microservices

IndicThreads

Creating an IoT Cloud service for a connected product presents a huge challenge. Why? Because the tasks of serving millions, responding to events in near real-time, securing the solution from ambitious IoT hackers, AND generating a monthly bill that doesn't collapse the business model, resemble attempts to solve Rubik's Cube, but are far more difficult. Commercial IoT platforms are irrelevant because of the vendor-lock, so we must use basic building blocks to accomplish all this. This session will illustrate the architecture of an IoT service on top of the AWS Cloud.

Slide share device to iot solution – a blueprint

Guy Vinograd ☁

apidays LIVE London 2021 - Securing PII at runtime by Rob Dickinson, Resurfac...

apidays

apidays LIVE India - 10 steps to secure your API by Pabitra Kumar Sahoo, Qual...

apidays

Using FIWARE and Microsoft Azure for the development of IoT solutions

DunavNET

Cisco Paris DevNet Hackathon slideshow - Intro

BeMyApp

Watch our webinar and learn: -How to satisfy the existing security compliance criteria in the era of impatient customers? -Industry best practices in ensuring the highest security and improved user experience in the authentication process. -Practical steps to planning and implementing optimal authentication ecosystems without unnecessary expenses. -From OTP to push and biometry – which authentication methods will be best suited to your business needs? -How to ensure strong authentication for remote work? For more info go to https://sxs.asseco.com/

Security & Seamless CX in User Authentication: How to Achieve Both?

Ivona M

Splunk for ITOA Breakout Session

Splunk

Internet of Things: Patterns For Building Real World Applications

Ivan Dwyer

International Journal of Ad hoc, sensor & Ubiquitous Computing (IJASUC) is a bi monthly open access peer-reviewed journal provides excellent international forum for sharing knowledge and results in theory, methodology and applications of Ad Hoc & Ubiquitous computing. Current information age is witnessing a dramatic use of digital and electronic devices in the workplace and beyond. Ubiquitous Computing presents a rather arduous requirement of robustness, reliability and availability to the end user. Ad hoc, Sensor & Ubiquitous computing has received a significant and sustained research interest in terms of designing and deploying large scale and high performance computational applications in real life.

International Journal of Ad hoc, Sensor & Ubiquitous Computing (IJASUC)

ijasuc

We are nearing the dawn of a very interesting age. From robotics, to smart homes, to web-connected lightbulbs, HVAC units, servers and routers—machines are in use everywhere. These machines have a lot to say, but what happens when you start listening? What things come to light and what new discoveries can you make? What questions can you now ask of your world? This session will explore the vast use cases where we have asked: Can I get data from that thing? If I can, what can it tell me? What happens if I Splunk it?

Machines are Talking. Are You Listening?

Splunk

Tendances (20)

apidays LIVE New York 2021 - OWASP cautions against “insufficient logging & m...

apidays LIVE New York 2021 - Solving API security through holistic obervabili...

Data in Motion - tech-intro-for-paris-hackathon

eIoT-tech-intro-for-paris-hackathon

CLOUDIFICATION FOR INTERNET OF THINGS - THE ROAD AHEAD

WSO2Con USA 2015: WSO2 Platform for IoT

The Future of CASBs - A Cloud Security Force Awakens

Connecting IoT devices to Azure

apidays LIVE New York 2021 - API Management from a network Engineer's perspec...

Building Resilient Microservices

Slide share device to iot solution – a blueprint

apidays LIVE London 2021 - Securing PII at runtime by Rob Dickinson, Resurfac...

apidays LIVE India - 10 steps to secure your API by Pabitra Kumar Sahoo, Qual...

Using FIWARE and Microsoft Azure for the development of IoT solutions

Cisco Paris DevNet Hackathon slideshow - Intro

Security & Seamless CX in User Authentication: How to Achieve Both?

Splunk for ITOA Breakout Session

Internet of Things: Patterns For Building Real World Applications

International Journal of Ad hoc, Sensor & Ubiquitous Computing (IJASUC)

Machines are Talking. Are You Listening?

Similaire à Hardware Lab. Andrew Kokhanovskyi. Kaa introduction

Pivotal microservices spring_pcf_skillsmatter.pptx

Sufyaan Kazi

Microservice architectures have generated quite a bit of hype in recent months, and practitioners across our industry have vigorously debated the definition, purpose, and effectiveness of these architectures. In this session, Matt Stine will cut through the Microservices hype and examine some very practical considerations: • Not an End in Themselves: Microservices are really all about helping us achieve continuous delivery • Systems over Services: Microservices are less about the services themselves and more about the systems we can assemble using them. Boilerplate patterns for configuration, integration, and fault tolerance are keys. • Operationalized Architecture: Microservices aren’t a free lunch. You have to pay for them with strong DevOps sauce. • It’s About the Data: Bounded contexts with API’s are great until you need to ask really big questions. How do we effectively wrangle all of the data at once? Along the way, we’ll see how open source technology efforts such as Cloud Foundry, Spring Cloud, Netflix OSS, Spring XD, and Hadoop can help us with many of these considerations.

To Microservices and Beyond

Matt Stine

Initially built to deploy and manage the Cloud Foundry “Elastic Runtime”, the platform that allows application developers and operators to easily deploy and manage applications and services through the entire app lifecycle (including production!), Cloud Foundry BOSH is a system that manages any virtual machine clusters of arbitrarily complex, distributed systems. You define your release through packages (what gets installed on the VMs), jobs (what is run on the VMs) and a deployment manifest (declaration of the cluster) and BOSH will first deploy and then continue to maintain your cluster to match that desired state. The result is a self-healing, eventually consistent system that markedly reduces the operational burdens and supports a great number of other Devops functions such as canary, zero-downtime upgrades, autoscaling, built in high availability and more. In this session we’ll show you how to create, deploy and manage a BOSH release, and we’ll watch what BOSH does when bad things happen.

Declarative Infrastructure with Cloud Foundry BOSH

cornelia davis

[2015-11월 정기 세미나] Cloud Native Platform - Pivotal

OpenStack Korea Community

피보탈 클라우드 파운더리를 사용하여 애플리케이션과 관련 서비스를 배포하고 운용하는 것에 대한 장점 및 이를 멀티 클라우드에서 사용할 수 있는 방법에 대해 설명된 슬라이드 입니다. 마이크로 서비스와 클라우드, 애플리케이션의 서비스 연동에 어떤 내용이 중요한지에 대해 개괄적으로 설명 됩니다.

피보탈 클라우드 파운드리 밋업 - 2017년 2월 24일

VMware Tanzu Korea

Removing Barriers Between Dev and Ops

Marie-Jeanne Dougados

TechTalk: Extend Existing Architectures to Digital Endpoints with CA API Mana...

CA Technologies

Oggi le aziende si trovano ad affrontare un percorso di Digital Transformation che richiede un’evoluzione dell'approccio classico alla gestione del ciclo di vita del software. L’Application Economy instaura un collegamento diretto tra l’IT di un’azienda ed il cliente finale: è per questo che le organizzazioni devono dotarsi degli strumenti e delle metodologie adatte a rispondere reattivamente ed in massima sicurezza agli input provenienti dal mondo esterno, garantendo massima compliance con le vigenti normative in ambito di sicurezza digitale.

Domenico Maracci, Stefano Sali - Secure Continuous Delivery - Sicurezza e Dev...

Codemotion

Explore Advanced CA Release Automation Configuration Topics

CA Technologies

Cloud native pitch-younjin-20150925-v2

Younjin Jeong

The allure of the cloud is compelling and offers greater agility, elasticity, and reduced capex. Businesses seek to reap these benefits by migrating to AWS, all while enforcing corporate governance and security policies to minimize risk. To accomplish this objective, businesses must continuously monitor the performance of complex applications, which is not practical with point solutions, such as bytecode instrumentation. In this session, learn how NETSCOUT’s smart data platform enables continuous monitoring in hybrid cloud environments to minimize risk and control costs. Hear real-life examples of how businesses optimized their AWS migration, gaining visibility and deep insights into both the physical and virtual worlds, to maintain the continuity and security of the services throughout the migration process.This session is brought to you by AWS partner, NETSCOUT Systems.

A New Approach to Continuous Monitoring in the Cloud: Migrate to AWS with NET...

Amazon Web Services

The new CA Application Performance Management (CA APM) Command Center simplifies the administration of CA APM installations by enabling you to browse the configuration of remote agents across your clusters and provides you with detaile+E6d diagnostic reports of your agents. It accelerates problem resolution by packaging these reports to share with CA Support online. This session demonstrates how to use the Command Center to administer and manage CA APM agents. For more information, please visit http://cainc.to/Nv2VOe

How to Use the CA Application Performance Management Command Center for Appli...

CA Technologies

Automated testing is an extreme time-saver, especially when you consider regression testing. Regression testing is the testing and retesting of applications when a new feature is introduced in order to verify the existing functionality is still working. To accomplish this, tests cases need to be executed, taking a lot of time especially if they are done manually. This session will show you how to build API tests that follow the user’s journey through the appellation—creating those headless tests magically. Seating is limited and available first come-first served. For more information, please visit http://cainc.to/Nv2VOe

TechTalk: Extreme Automation Creating Headless Tests “Automagically”

CA Technologies

Sydney cloud foundry meetup - Service Brokers

Lawrence Crowther

apidays LIVE Australia 2020 - Data with a Mission by Matt McLarty

apidays

apidays LIVE Paris - Data with a mission: a COVID-19 API case study by Matt M...

apidays

Today, applications are developed amongst various vendors for use supporting Naval Forces on shore and at sea, with different requirements all having to be managed by infrastructure. The Collaborative Software Factory (CSF) is a US Navy Research and Development project designed to bring modern application development to the Navy. In this session you will learn how the CSF is designed as an opinionated way to develop software destined for the fleet. It is designed to help application teams leverage DevOps methodologies using a polyglot platform in Red Hat OpenShift, modern application frameworks, and integrating security into software pipelines. Of the hundreds of security controls necessary for an application accreditation, the approach taken aims to provide many of them via inheritance. AWS and the underlying Red Hat OpenShift container platform provide control matrixes and mappings to help assurance teams with automating accreditation of software. This, plus security features such as code scanning and OpenSCAP scans built into the pipeline, help to rapidly deliver software to the fleet while still meeting compliance and security requirements. By leveraging containers and a managed container platform to provide a stable, consistent platform for applications to be developed, the Navy was able to standardize deployments at sea, such as the upcoming Compile to Combat 24 effort. This effort takes advantage of the AWS GovCloud (US) services accredited at DoD SRG Impact Level 5, such as Amazon EC2, Amazon Simple Storage Service (S3), AWS Key Management Service (KMS) and others to provide elastic scalability to application consumers to leveraging continuous integration and on-demand testing environments.

Modernizing Software Development in the US Navy

Amazon Web Services

Vizag Virtual Meetup #7: Trending API Topics for 2022

Ravi Tamada

Removing Barriers Between Dev and Ops

VMware Tanzu

CA Gen Exploration – What's New and Cool in Application Development

CA Technologies

Similaire à Hardware Lab. Andrew Kokhanovskyi. Kaa introduction (20)

Pivotal microservices spring_pcf_skillsmatter.pptx

To Microservices and Beyond

Declarative Infrastructure with Cloud Foundry BOSH

[2015-11월 정기 세미나] Cloud Native Platform - Pivotal

피보탈 클라우드 파운드리 밋업 - 2017년 2월 24일

Removing Barriers Between Dev and Ops

TechTalk: Extend Existing Architectures to Digital Endpoints with CA API Mana...

Domenico Maracci, Stefano Sali - Secure Continuous Delivery - Sicurezza e Dev...

Explore Advanced CA Release Automation Configuration Topics

Cloud native pitch-younjin-20150925-v2

A New Approach to Continuous Monitoring in the Cloud: Migrate to AWS with NET...

How to Use the CA Application Performance Management Command Center for Appli...

TechTalk: Extreme Automation Creating Headless Tests “Automagically”

Sydney cloud foundry meetup - Service Brokers

apidays LIVE Australia 2020 - Data with a Mission by Matt McLarty

apidays LIVE Paris - Data with a mission: a COVID-19 API case study by Matt M...

Modernizing Software Development in the US Navy

Vizag Virtual Meetup #7: Trending API Topics for 2022

Removing Barriers Between Dev and Ops

CA Gen Exploration – What's New and Cool in Application Development

Plus de GeeksLab Odessa

DataScience Lab, 13 мая 2017 Коррекция геометрических искажений оптических спутниковых снимков Алексей Кравченко (Senior Data Scientist at Zoral Labs) Мы рассмотрим разнообразие существующих спутниковых данных и способов их применения в сельском и лесном хозяйстве, картографировании земной поверхности. Далее сфокусируемся на задаче геометрической коррекции снимков как первом шаге процесса обработки спутниковых данных, включая геопривязку снимков, регистрацию изображений, субпиксельную идентификацию контрольных точек, совмещение каналов. Также расскажем о некоторых интересных и неожиданных подходах к определению ориентации и jitter спутников и построению маски облачности. Все материалы: http://datascience.in.ua/report2017

DataScience Lab2017_Коррекция геометрических искажений оптических спутниковых...

GeeksLab Odessa

DataScience Lab, 13 мая 2017 Kappa Architecture: How to implement a real-time streaming data analytics engine Juantomás García (Data Solutions Manager at OpenSistemas, Madrid, Spain) We will have an introduction of what is the kappa architecture vs lambda architecture. We will see how kappa architecture is a good solution to implement solutions in (almost) real time when we need to analyze data in streaming. We will show in a case of real use: how architecture is designed, how pipelines are organized and how data scientists use it. We will review the most used technologies to implement it from apache Kafka + spark using Scala to new tools like apache beam / google dataflow. Все материалы: http://datascience.in.ua/report2017

DataScience Lab 2017_Kappa Architecture: How to implement a real-time streami...

GeeksLab Odessa

DataScience Lab 2017_Блиц-доклад_Турский Виктор

GeeksLab Odessa

DataScience Lab, 13 мая 2017 Обзор методов детекции лиц на изображение Юрий Пащенко ( Research Engineer, Ring Labs) В данном докладе мы предлагаем обзор наиболее новых и популярных методов обнаружения лиц, таких как Viola-Jones, Faster-RCNN, MTCCN и прочих. Мы обсудим основные критерии оценки качества алгоритма а также базы, включая FDDB, WIDER, IJB-A. Все материалы: http://datascience.in.ua/report2017

DataScience Lab 2017_Обзор методов детекции лиц на изображение

GeeksLab Odessa

DataScience Lab, 13 мая 2017 Сходство пациентов: вычистка дубликатов и предсказание пропущенных диагнозов Виктор Сарапин (CEO at V.I.Tech) Как эффективно определять дубликаты на десятках миллионов пациентов, и как определять пропущенные диагнозы и лечебные действия. Все материалы доступны по ссылке: http://datascience.in.ua/report2017

DataScienceLab2017_Сходство пациентов: вычистка дубликатов и предсказание про...

GeeksLab Odessa

DataScience Lab, 13 мая 2017 Recent deep learning approaches for speech generation Дмитрий Белевцов (Techlead at IBDI) В последние пол года появилось несколько важных моделей на базе глубоких нейронных сетей, способных успешно синтезировать человеческую речь на уровне отдельных сэмплов. Это позволило обойти многие недостатки классических спектральных подходов. В этом докладе я сделаю небольшой обзор архитектур наиболее популярных сетей, таких как Wavenet и SampleRNN. Все материалы доступны по ссылке: http://datascience.in.ua/report2017

DataScienceLab2017_Блиц-доклад

GeeksLab Odessa

DataScience Lab, 13 мая 2017 Распределенные вычисления: использование BOINC в Data Science Виталий Кошура (Software Developer at Lohika) BOINC - это открытое программное обеспечение для распределенных вычислений. Данный доклад освещает использование приложения BOINC в различных областях науки, которые связаны с обработкой огромных массивов данных, на примере текущих активных исследовательских проектов. Все материалы доступны по ссылке: http://datascience.in.ua/report2017

DataScienceLab2017_Блиц-доклад

GeeksLab Odessa

DataScience Lab, 13 мая 2017 Магистерская программа "Data Science" в УКУ Орест Купин(Master's Student at UCU) В этом докладе я расскажу вам о магистерской программе со специализацией в анализе данных в Украинском Католическом Университете. Я расскажу про структуру программы, основные курсы, а также опишу свой опыт как студента УКУ и поговорю об вызовах с которыми мы столкнулись в этом году. Все материалы доступны по ссылке: http://datascience.in.ua/report2017

DataScienceLab2017_Блиц-доклад

GeeksLab Odessa

DataScience Lab, 13 мая 2017 Cервинг моделей, построенных на больших данных с помощью Apache Spark Степан Пушкарев (GM (Kazan) at Provectus / CTO at Hydrosphere.io) После подготовки данных и обучения моделей на больших данных с использованием Apache Spark встает вопрос о том, как использовать обученные модели в реальных приложениях. Помимо модели важно не забывать про весь пайплайн пре-процессинга данных, который должен попасть в продакшн в том виде, в котором его спроектировал и реализовал дата саентист. Такие решения, как PMML/PFA, основанные на экспорте/импорте модели и алгоритма имеют очевидные недостатки и ограничения. В данном докладе мы предложим альтернативное решение, которое упрощает процесс использования моделей и пайплайнов в реальных боевых приложениях. Все материалы доступны по ссылке: http://datascience.in.ua/report2017

DataScienceLab2017_Cервинг моделей, построенных на больших данных с помощью A...

GeeksLab Odessa

DataScience Lab, 13 мая 2017 BioVec: Word2Vec в задачах анализа геномных данных и биоинформатики Дмитрий Новицкий (Старший научный сотрудник в ИПММС НАНУ) Этот доклад посвящен bioVec: применению технологии word2vec в задачах биоинфоматики. Сначала мы напомним как работает Word2vec и аналогичные ему методы Word Embedding. Затем расскажем об особенностях Word2vec в применении к геномным последовательностям-- основному виду данных в биоинформатике. Как обучать bioVec, и применять эту технологию к задачам классификации белков, предсказания их функции и др. В заключении мы продемонстрируем примеры кода для обучения и использования bioVec. Все материалы доступны по ссылке: http://datascience.in.ua/report2017

DataScienceLab2017_BioVec: Word2Vec в задачах анализа геномных данных и биоин...

GeeksLab Odessa

DataScience Lab, 13 мая 2017 Data Sciences и Big Data в Телекоме Александр Саенко (Software Engineer at SoftServe/CISCO) Александр расскажет о некоторых интересных примерах использования Big Data и Data Science в Телекоме: оптимизация сотовой сети, улучшение клиентского опыта, модели прогнозирования местоположения мобильных устройств, предотвращения оттока абонентов, обнаружение фрода и других. Рассмотрит основные современные подходы к их решению на основе алгоритмов машинного обучения. Все материалы доступны по ссылке: http://datascience.in.ua/report2017

DataScienceLab2017_Data Sciences и Big Data в Телекоме_Александр Саенко

GeeksLab Odessa

DataScience Lab, 13 мая 2017 Высокопроизводительные вычислительные возможности для систем анализа данных Михаил Федосеев ( Архитектор инфраструктурных решений, LanTec) В докладе мы поговорим о hardware стороне систем анализа данных для случаев построения приватных облаков или локальных высокопроизводительных вычислительных кластеров. Рассмотрим какие технологии и комплексные решения от компании Hewlett Packard Enterprise позволяют ускорить процесс анализа данных. Это не только зарекомендовавшие в своей области лучшие в своем сегменте сервера линейки HPE Apollo, а так же высокоскоростные сетевые коммутаторы HPE, но и дополнительные вспомогательные элементы решения, такие как мощные графические карты NVIDIA и хост-процессоры Xeon Phi. Так же будет рассмотрен стек HPE Core HPC Software Stack, который позволяет администраторам контролировать использование ресурсов системы. Все материалы доступны по ссылке: http://datascience.in.ua/report2017

DataScienceLab2017_Высокопроизводительные вычислительные возможности для сист...

GeeksLab Odessa

DataScience Lab, 13 мая 2017 Мониторинг модных трендов с помощью глубокого обучения и TensorFlow, Ольга Романюк (Data Scientist at Eleks) В течении последних 8 месяцев мы в Eleks работали над системой отслеживания модных трендов, основанной на глубинной остаточной нейронной сети с тождественным отображением. При тренировке сети мы использовали онлайн увеличение объема данных, а также распараллеливание данных по двум картам GPU. Мы создали эту систему с нуля при помощи TensorFlow. В презентации я расскажу о практической стороне проекта, нюансах реализации и подводных камнях, с которыми мы столкнулись во время работы. Все материалы: http://datascience.in.ua/report2017

DataScience Lab 2017_Мониторинг модных трендов с помощью глубокого обучения и...

GeeksLab Odessa

DataScience Lab, 13 мая 2017 Кто здесь? Автоматическая разметка спикеров на телефонных разговорах Юрий Гуц (Machine Learning Engineer, DataRobot) Автоматическая аннотация спикеров — интересная задача в обработке мультимедиа-данных. Нам нужно ответить на вопрос "Кто говорит когда?", не зная ничего о количестве и личности спикеров, присутствующих на записи. В этом докладе мы рассмотрим работающие методы для аннотации спикеров на телефонных разговорах. Все материалы: http://datascience.in.ua/report2017

DataScience Lab 2017_Кто здесь? Автоматическая разметка спикеров на телефонны...

GeeksLab Odessa

From bag of texts to bag of clusters Терпиль Евгений / Павел Худан (Data Scientists / NLP Engineer at YouScan) Мы рассмотрим современные подходы к кластеризации текстов и их визуализации. Начиная от классического K-means на TF-IDF и заканчивая Deep Learning репрезентациями текстов. В качестве практического примера, мы проанализируем набор сообщений из соц. сетей и попробуем найти основные темы обсуждения. Все материалы: http://datascience.in.ua/report2017

DataScience Lab 2017_From bag of texts to bag of clusters_Терпиль Евгений / П...

GeeksLab Odessa

Графические вероятностные модели для принятия решений в проектном управлении Ольга Татаринцева (Data Scientist at Eleks) Как часто вам приходится принимать решения, используя знания в определенной предметной области? На сколько хороши такие решения? А теперь представьте, что вы собрали знания лучших экспертов в предметной области. Похоже, что ваши решения, основанные на этих знаниях, будут куда более взвешенными, не так ли? Мы будем говорить о системе ProjectHealth, которая была построена на основе опыта лучших экспертов в проектном управлении в компании Eleks. Для реализации поставленной задачи была использована графовая вероятностная модель, а именно байесовская сеть, имплементированная на Python. За время работы над проектом мы прошли шаги от извлечения требований, поиска данных и построения модели с нуля до реализации BI дашборда с возможностью углубиться в детали, доходя до сырых данных. Сейчас ProjectHealth экономит большое количество времени для топ менеджмента и ресурсов компании, так как мониторит состояние бизнеса в малейших деталях ежедневно и делает это как настоящий эксперт. Все материалы: http://datascience.in.ua/report2017

DataScience Lab 2017_Графические вероятностные модели для принятия решений в ...

GeeksLab Odessa

DataScienceLab, 13 мая 2017 Оптимизация гиперпараметров машинного обучения при помощи Байесовской оптимизации Максим Бевза (Research Engineer at Grammarly) Все алгоритмы машинного обучения нуждаются в настройке (тьюнинге). Часто мы используем Grid Search или Randomized Search или нашу интуицию для подбора гиперпараметров. Байесовская оптимизация поможет нам направить Randomized Search в те места, которые наиболее перспективны, так, чтобы тот же (или лучший) результат мы получили за меньшее количество итераций. Все материалы: http://datascience.in.ua/report2017

DataScienceLab2017_Оптимизация гиперпараметров машинного обучения при помощи ...

GeeksLab Odessa

DataScienceLab, 13 мая 2017 Как знать всё о покупателях (или почти всё)? Дарина Перемот (ML Engineer at SynergyOne) Раскроем собственный ответ на вопрос "Чего же хочет покупатель?". Поделимся результатами исследований транзакций и расскажем, есть ли у вас домашний питомец. А так же, продемонстрируем, как машинное обучение уже сейчас помогает узнавать вас ближе. Все материалы: http://datascience.in.ua/report2017

DataScienceLab2017_Как знать всё о покупателях (или почти всё)?_Дарина Перемот

GeeksLab Odessa

JS Lab 2017, 25 марта Mapbox GL: как работают современные интерактивные карты Владимир Агафонкин (Lead JavaScript Engineer at MapBox) Mapbox GL JS — открытая JS-библиотека для создания современных интерактивных карт на основе WebGL. В разработке более трех лет, она сочетает в себе множество удивительных технологий, сложных алгоритмов и идей для достижения плавной отрисовки тысяч векторных объектов с миллионами точек в реальном времени. В этом докладе вы узнаете, как работает библиотека внутри, и с какими сложностями сталкиваются разработчики современных WebGL-приложений. В докладе: отрисовка шрифтов, триангуляция линий и полигонов, пространственные индексы, определение коллизий, расстановка надписей, кластеризация точек, обрезка фигур, упрощение линий, упаковка спрайтов, компактные бинарные форматы, параллельная обработка данных в браузере, тестирование отрисовки и другие сложности. Все материалы: http://jslab.in.ua/2017

JS Lab 2017_Mapbox GL: как работают современные интерактивные карты_Владимир ...

GeeksLab Odessa

JS Lab2017, 25 марта, Одесса Под микроскопом: блеск и нищета микросервисов на node.js Илья Климов (CEO at Javascript.Ninja) "- Что это? - Микросервис! - И что он делает? - Микропадает". Про микросервисы сейчас не рассуждает только ленивый. Все рассказывают про то, как микросервисы спасают от сложности разработки, снижают время развертывание и повышают общую надежность систем. Этот доклад - про подводные камни, которые ждут оседлавших волну этого хайпа с Node.JS. Мы поговорим про ошибки, которые стоили мне и моей компании бессонных ночей, потерянной прибыли и, временами, веры в могущество микросервисной архитектуры. Все материалы: http://jslab.in.ua/ Организаторы: http://geekslab.org.ua/

JS Lab2017_Под микроскопом: блеск и нищета микросервисов на node.js

GeeksLab Odessa

Plus de GeeksLab Odessa (20)