Edge から Cloud, Beginner から Professional までサポートする Azure AI プラットフォーム

Edge から Cloud /
Beginner から Professional までサポートする
Azure AI プラットフォーム
日本マイクロソフトパートナー事業本部
松崎剛

AI 成熟度モデル (MPN AI Playbook より)
AI API の統合
構築済み AI API を
ソリューションに利用
している
カスタムモデル化
お客様のデータで
トレーニングしたモデルを
展開している
カスタムアルゴリズム
カスタムアルゴリズムを
設計・実装し、アルゴリ
ズムについて深く理解し
ている
特定業種への特化
業界特化型の AI ソリューション
パッケージを提供している

Machine Learning on Azure
洗練されたトレーニング済モデル
ソリューション開発の簡素化
Azure
Databricks
Machine Learning
VMs
使い慣れたフレームワーク
先進的なディープラーニングソリューションの構築
TensorFlow KerasPytorch Onnx
Azure
Machine Learning
LanguageSpeech
…
Azure
Search
Vision
On-premises Cloud Edge
生産性向上のためのサービス
データサイエンティストと開発者の支援
強力なインフラストラクチャー
ディープラーニングの加速化
柔軟な配置
インテリジェントクラウドおよびエッジへの展開と管理
Cognitive Services

Computer Vision API
Content Moderator
Bing Spell Check
QnA Maker
Bing Auto Suggest
Face API (Emotion)
Video Indexer
Speaker Recognition API
Text Analytics API
Translator Text API
Bing Visual Search
Bing News Search
Bing Video Search
Bing Web Search
Bing Entity Search
Custom Decision
Gesture
Local Insights
And more…
Anomaly Detector
Knowledge Exploration
Event Tracking
Custom Vision
Language
Understanding
Bing Custom Search
Answer Search
Custom Translator
Custom Voice
Speech to Text,
Text to Speech
Standard Voice
Text to Speech
Neural Voice
Speech Translator,
Custom Speech
Ink Recognizer URL Preview
Bing Local Business Search
Conversation Learner
Personality Chat
Anomaly Finder
Form Recognizer
Content Moderator
Personalizer
Bing Image Search
Ink Analysis
AI の民主化 (１) – Cognitive Services

Computer Vision API
Content Moderator
Bing Spell Check
QnA Maker
Bing Auto Suggest
Face API (Emotion)
Video Indexer
Speaker Recognition API
Text Analytics API
Translator Text API
Bing Visual Search
Bing News Search
Bing Video Search
Bing Web Search
Bing Entity Search
Custom Decision
Gesture
Local Insights
And more…
Anomaly Detector
Knowledge Exploration
Event Tracking
Custom Vision
Language
Understanding
Bing Custom Search
Answer Search
Custom Translator
Custom Voice
Speech to Text,
Text to Speech
Standard Voice
Text to Speech
Neural Voice
Speech Translator,
Custom Speech
Ink Recognizer URL Preview
Bing Local Business Search
Conversation Learner
Personality Chat
Anomaly Finder
Form Recognizer
Content Moderator
Personalizer
Bing Image Search
Ink Analysis
AI の民主化 (１) – Cognitive Services
Container Support

AI の民主化 (２) – Power Platform
Analyze Act Automate

Power BI

PowerApps

ML のライフサイクル管理

Azure Machine Learning service
Azure
AML service workspace
Data Scientist
SDK
Operate
Blob
Provision data
VM with GPUs
Cluster
Mount
Model
Kubernetes
Cluster
Training
Serving

Azure Machine Learning service
Azure
AML service workspace
Data Scientist
SDK
Operate
Blob
Provision data
VM with GPUs
Cluster
Mount
Model
Container
Image
Training
Serving
IoT Hub
Devices
az iot edge set-modules --device-id [device id] --hub-name [hub name] --content ./deployment.json

一般のアプリケーション開発
Model reproducibility Model retrainingModel deploymentModel validation
Build appCollaborate Test app Release app Monitor app
App developer
using Azure DevOps
Data scientist using
Azure Machine Learning

MLOps による機械学習ライフサイクルの自動化
Train
model
Validate
model
Deploy
model
Monitor
model
App developer
using Azure DevOps
Retrain model
Code
Dataset &
environment
versioning

Azure Machine Learning extension for Azure DevOps
Train
model
Validate
model
Deploy
model
Monitor
model
App developer
using Azure DevOps
Retrain model
Code
Dataset &
environment
versioning

クラウドで実行するメリット
クラウドでは下記はどちらも同じ Cost
trial01 trial02 trial03 … trial10
trial01
trial02
trial03
trial10
…
(1) 10 times sequential in a single machine
(2) 10 times parallel and stop after execution

Azure Machine Learning service 付加価値
ハイパーパラメータのチューニング Automated Machine Learning

大量データと高度分析 (Batch & Real-time)
INGEST STORE PREP & TRAIN MODEL & SERVE
Azure Blob Storage
Business/custom apps
(Structured)
Logs, files and media
(unstructured)
Azure SQL Data
Warehouse
Azure Analysis
Services
Azure Data Factory
Sensors and IoT
(unstructured)
Azure HDInsight (Kafka)
Azure IoT Hub
Cosmos DB
Predictive apps
Operational Reports
&
Analytical Dashboards
(PowerBI)
SQL Database
SQL
Polybase
Azure Databricks

Structured Streaming を使った分析例
データソース
Apache Kafka (HDInsight)
Initial Stream Processing
Map, Filter, Join, Windowing, …

データソース
Databricks
# create streaming dataframe from Kafka
df = spark
.readStream
.format("kafka")
.option("kafka.bootstrap.servers", "host1:port1,host2:port2")
.option("subscribe", "topic1")
.option("startingOffsets", "earliest")
.load()

データソース
Databricks
Advanced Analysis (query, inferencing, etc) by cluster
# Watermarking and windowing analysis
windowed_df = (
df
.withWatermark(df.event_time, "10 minutes")
.groupBy(
df.device_id,
window(df.event_time, "5 minutes"))
.count()
)
analyzed_df = model.transform(windowed_df)
...

データソース
Databricks
# Sink and Start streaming !
df.writeStream
.format("com.databricks.spark.sqldw")
.option("url", "...")
.option("tempDir", "wasbs://... ")
.option("forwardSparkAzureStorageCredentials", "true")
.option("dbTable", "testTable")
.option("checkpointLocation", "/tmp_checkpoint_location")
.start()
Data Warehouse

Input Stream
(Kafka or Event Hub)
Structured
Streaming
(Databricks)
SQL DW
File
Cosmos DB
Event Hub
or Kafka
BI
SEMS
BizApp
Function
Grid
dashboard
logging
transaction
alert or workflow
…

Databricks Delta
Streaming
OPTIMIZE
Columnar ベースの
Parquet データメタデータ +

Databricks Delta
Streaming
OPTIMIZE

Big Data セミナー＠10/31
是非ご参加ください
http://aka.ms/bgdev20191031

くらでべ
（Cloud Developer Channel）
http://aka.ms/clouddevch

Edge から Cloud, Beginner から Professional までサポートする Azure AI プラットフォーム

Recommandé

Recommandé

Contenu connexe

Tendances

Tendances (20)

Similaire à Edge から Cloud, Beginner から Professional までサポートする Azure AI プラットフォーム

Similaire à Edge から Cloud, Beginner から Professional までサポートする Azure AI プラットフォーム (20)

Plus de IoTビジネス共創ラボ

Plus de IoTビジネス共創ラボ (20)

Dernier

Dernier (7)

Edge から Cloud, Beginner から Professional までサポートする Azure AI プラットフォーム