Upgrade to Pro
— share decks privately, control downloads, hide ads and more …
Speaker Deck
Features
Speaker Deck
PRO
Sign in
Sign up for free
Search
Search
機械学習エンジニアのための新サービス/DeepLens & SageMaker
Search
ryo nakamaru
December 14, 2017
Technology
0
990
機械学習エンジニアのための新サービス/DeepLens & SageMaker
re:Invent2017 で発表された新サービスについて JAWS-UG AI 支部で LT しました
ryo nakamaru
December 14, 2017
Tweet
Share
More Decks by ryo nakamaru
See All by ryo nakamaru
AWSで楽をするサービスメッシュ入門/appmesh-trial
pottava
1
1.4k
reinforce-2019-recap-lt
pottava
2
4.1k
ScaleShift-jp-2019-summer
pottava
1
190
Firecracker とは何か/what is Firecracker
pottava
13
5.3k
ハイブリッド並列 on Kubernetes/hybrid-parallel-program-on-kubernetes
pottava
1
410
AWS Fargate + Code 兄弟で始める継続的デリバリー / Continuous Delivery with AWS Fargate and Code brothers
pottava
12
3.1k
Singularity と NVIDIA GPU Cloud で作る ハイブリッド機械学習環境の構築 / Building a hybrid environment for Machine Learning with Singularity and NGC
pottava
3
1.2k
明日から始めるちょい足し λ / get-started-with-aws-lambda
pottava
4
2.4k
NGC と Singularity によるハイブリッド機械学習環境 / A hybrid environment for Machine Learning with NGC and Singularity
pottava
0
460
Other Decks in Technology
See All in Technology
サーバレスアプリ開発者向けアップデートをキャッチアップしてきた #AWSreInvent #regrowth_fuk
drumnistnakano
0
160
10分で学ぶKubernetesコンテナセキュリティ/10min-k8s-container-sec
mochizuki875
1
130
振る舞い駆動開発(BDD)における、テスト自動化の前に大切にしていること #stac2024 / BDD formulation
nihonbuson
4
1.4k
密着! Bedrockerがre:Invent 2024で過ごした5日間を紹介
minorun365
PRO
3
370
最近のUplift Modeling手法にRでトライ
hskksk
0
240
JAWS-UG 横浜支部 #76 AWS re:Invent 2024 宇宙一早い Recap LT3Amazon EKS Auto Modeと遊び(パーティ)の話
tjotjo
0
180
OpenAIの蒸留機能(Model Distillation)を使用して運用中のLLMのコストを削減する取り組み
pharma_x_tech
2
360
tokyo_re_Growth2024_yoshi
yoshi22
0
150
同一クラスタ上でのFluxCDとArgoCDのリソース最適化の話
kumorn5s
0
200
Password-less Journey - パスキーへの移行を見据えたユーザーの準備 @ AXIES 2024
ritou
2
1.2k
アップデート紹介:AWS Data Transfer Terminal
stknohg
PRO
0
140
新機能Amazon GuardDuty Extended Threat Detectionはネ申って話
cmusudakeisuke
0
390
Featured
See All Featured
How to Create Impact in a Changing Tech Landscape [PerfNow 2023]
tammyeverts
48
2.2k
What’s in a name? Adding method to the madness
productmarketing
PRO
22
3.2k
The Cost Of JavaScript in 2023
addyosmani
45
6.9k
Agile that works and the tools we love
rasmusluckow
328
21k
Become a Pro
speakerdeck
PRO
25
5k
Visualizing Your Data: Incorporating Mongo into Loggly Infrastructure
mongodb
44
9.3k
Creating an realtime collaboration tool: Agile Flush - .NET Oxford
marcduiker
26
1.8k
Distributed Sagas: A Protocol for Coordinating Microservices
caitiem20
330
21k
Testing 201, or: Great Expectations
jmmastey
40
7.1k
Making Projects Easy
brettharned
116
5.9k
Performance Is Good for Brains [We Love Speed 2024]
tammyeverts
6
500
KATA
mclloyd
29
14k
Transcript
機械学習エンジニアのための新サービス DeepLens & SageMaker JAWS-UG AI #6 @ Dec 14,
2017 Ryo NAKAMARU, SUPINF Inc. / Rescale, Inc.
Amazon SageMaker
3
SageMaker 4 設計 学習 デプロイ • ワンクリック起動 Jupyter notebook •
プリセットされた 機械学習アルゴリ ズム群 ▶ ▶ • ジョブを定義し 学習開始 • 並列分散学習 • ハイパーパラメタ 最適化 • シンプルな API で モデルをデプロイ • フルマネージドな 推論エンドポイント の提供
SageMaker • 一部機能だけの利用も OK ‣ 設計+学習機能だけ使う ‣ 推論エンドポイントだけ使う etc.. •
抽象度の高い SageMaker API • Docker を使えば学習・推論のカスタマイズも 5
SageMaker API 6 • 学習 from sagemaker import KMeans kmeans
= KMeans(k=10, data_location=s3_data_location, output_path=s3_output_location, train_instance_type='ml.c4.8xlarge', train_instance_count=4, role=execution_iam_role) kmeans.fit(kmeans.record_set(train_set[0]))
SageMaker API • デプロイ 7 predictor = kmeans.deploy(instance_type='ml.m4.xlarge', initial_instance_count=1)
SageMaker API 8 • 推論 result = predictor.predict(valid_set[0][0:100])
SageMaker inference bot 9
AWS DeepLens
11
DeepLens での推論 12 DeepLens raw data Local 動画生データ
DeepLens での推論 13 DeepLens raw data Local results Greengrass Inference
with 推論
DeepLens での推論 14 DeepLens raw data Local results AWS Greengrass
IoT Rule Lambda Inference with MQTT 「ホットドック があったよ」
DeepLens へのデプロイ 15 DeepLens AWS SageMaker Trained by EC2 Model
学習
DeepLens へのデプロイ 16 DeepLens AWS DeepLens SageMaker a project Model
Model モデルを インポート
DeepLens へのデプロイ 17 DeepLens AWS DeepLens a project Model 推論
& AWS IoT 連携の実装
DeepLens へのデプロイ 18 DeepLens AWS Greengrass Inference with DeepLens a
project Model デプローイ
DeepLens • 開発者向けデバイス ‣ 動画を使う深層学習をローカルで手軽に回せる ‣ デバイスへのデプロイもとても簡単! • HD ビデオ
& 秒間 10 億回の浮動小数点数演算能力 • 249 USD で予約受付中(Amazon.com) 19
中丸 良 @pottava • AWS Certified Solutions Architect, DevOps Engineer
- Professional • CTO at SUPINF Inc • Solutions Architect at Rescale, Inc. Profile 20
Containerize your app! 21 • クラウド / コンテナ を強みにした受託開発運用、コンサルティング •
2015 年から Docker の本番運用を開始・豊富な CI / CD 事例 • スピンフ、と読みます・・
Cloud HPC with 22 • クラウド HPC シミュレーションプラットフォームの提供 • 2011
年初頭に設立、Peter Thiel や Microsoft から出資 • スケーラブルなシミュレーションや機械学習を!
ご静聴ありがとうございました :) 参考文献: • AWS re:Invent 2017: Introducing Amazon SageMaker
(MCL365) https://www.youtube.com/watch?v=4pbXdsjZx_k • Amazon SageMaker – 機械学習を加速する | Amazon Web Services ブログ https://aws.amazon.com/jp/blogs/news/amazon-sagemaker/ • Extend AWS DeepLens to Send SMS Notifications with AWS Lambda | AWS AI Blog https://aws.amazon.com/jp/blogs/ai/extend- aws-deeplens-to-send-sms-notifications-with-aws-lambda/