AWS小ネタ集

第5回 AWS User Group - Sapporo 勉強会

AWS小ネタ集
欧文印刷株式会社田名辺健人
2012.02.14

http://www.ﬂickr.com/photos/mendhak/4271441910/

田名辺健人（たなべたけひと）
ソフトウェアエンジニア
欧文印刷株式会社（東京都）
2011年11月から札幌でテレワーク
@dateofrock

札幌・東京コアメンバー
Ustream担当
好きなサービスはSQS

Happy Valentine

http://www.ﬂickr.com/photos/pinksherbet/1483193019/

LT（Lady's Happy Valentine
Talk）
してくれた貴女へ…


NUboard
Happy Valentine
プレゼント♡
from 欧文印刷


たまには
技術の話を
しようと思います
www

• S3 小ネタ
• 読み書きのスループットを上げる方法
• バケット名にピリオドでハマる方法

• S3実践ネタ
• 設定ファイル置き場
• Pre-signed URLの使い道

• Simpleシリーズ2連発
• アプリ内エラー通知はSNSが便利
• SimpleDB APIがシンプルじゃない件


ネ
タ
作
り
す
ぎ
た
w

http://www.ﬂickr.com/photos/donsolo/2435421847/

半分
• S3 小ネタ
• 読み書きのスループットを上げる方法
• バケット名にピリオドでハマる方法

• S3実践ネタ

カット
• 設定ファイル置き場
• Pre-signed URLの使い道

• Simpleシリーズ2連発
• アプリ内エラー通知はSNSが便利
• SimpleDB APIがシンプルじゃない件

orz

Pre-signed URLの使い道

• S3オブジェクトに対して有効期限付きの
パブリックなURLを生成できる

• Query String Request Authentication
http://docs.amazonwebservices.com/AmazonS3/latest/dev/
RESTAuthentication.html#RESTAuthenticationQueryStringAuth

Pre-signed URL
どんなもの？

GET /images/photo.jpg?
AWSAccessKeyId=0PN5J17HBGZHT7JJ3X82
&Expires=1141889120
&Signature=vjbyPxybdZaNmGa%2ByT272YEAiv4%3D
Signature =
URL-Encode(
Base64(
HMAC-SHA1(
YourSecretAccessKeyID,
UTF-8-Encoding-Of(StringToSign))));
StringToSign = HTTP-VERB + "n" +
Content-MD5 + "n" +
Content-Type + "n" +
Expires + "n" +
CanonicalizedAmzHeaders +
CanonicalizedResource;

こんなﾏﾝﾄﾞｸｻｲもの
はSDKに頼ろう

Java

Interface AmazonS3
java.net.URL generatePresignedUrl(java.lang.String bucketName,
java.lang.String key,
java.util.Date expiration,
HttpMethod method)
throws AmazonClientException

Date after5Seconds = new Date();
after5Seconds.setTime(System.currentTimeMillis() + 5 * 1000);

AmazonS3 s3 = new AmazonS3Client(cred);
Url url = s3.generatePresignedUrl(“mybucket”, “images/photo.jpg”,
after5Seconds, HttpMethod.GET);

Ruby
Class: AWS::S3::S3Object
- (URI::HTTP, URI::HTTPS) url_for(method, options = {})

url = s3.buckets['mybucket'].objects['images/photo.jpg'].
url_for(:read, :expires => 5)

Ruby

Ruby
Class: AWS::S3::S3Object
- (URI::HTTP, URI::HTTPS) url_for(method, options = {})

ステキ！
url = s3.buckets['mybucket'].objects['images/photo.jpg'].
url_for(:read, :expires => 5)

Pre-signed URLの使い道

• Webサーバーの負荷が劇的に減る！
• アプリはPre-signed URLを生成してS3
にリダイレクトするだけ

• 重たいデータ送出はS3にお任せ！

アプリ内の通知は
SNSが便利

たとえば例外が投げられたら

メールでお知らせとか

Java
例えばUncaughtExceptionHandlerを使う

Thread.setDefaultUncaughtExceptionHandler(
new UncaughtExceptionHandler() {
public void uncaughtException(Thread t, Throwable e) {
" AWSCredentials cred = new BasicAWSCredentials(
"アクセスキー","シークレットキー");
" AmazonSNS sns = new AmazonSNSClient(cred);
" String stackTrace = getStackTraceString(e);
" sns.publish(new PublishRequest(
" " " "arn:aws:sns:ap-northeast-1:xxxxx:sns-test",
" " " stackTrace, "Java Exception"));
" }
" }
);

Ruby on Rails
例えばApplicationController#rescue_fromを使う

require 'rubygems'
require 'aws-sdk'

class ApplicationController < ActionController::Base
rescue_from StandardError do |exception|
topic = AWS::SNS::Topic.new(
'arn:aws:sns:ap-northeast-1:xxxxx:sns-test'
)

topic.publish(exception.backtrace.to_s,
:subject => 'Rails exception');
raise exception
end
end

ただし、
メッセージは
8kB以内に限るorz

SimpleDB APIが
シンプルじゃない件

• いや、シンプルすぎて冗長なコードに
なってしまう

• 素のJDBCはチョット…的な。
• データの型は全部文字列だよ！

SimpleDBの
Data Mapperがﾎｽｨ
Hibernate的な
ActiveRecord的な
WOのEOF的な

Ruby

SDKにSimpleDBの

Data Mapperが！

class Book < AWS::Record::Base
string_attr :title
end

Book.new(:title => 'スベらないプレゼン').save
Book.where('title like ?', '%プレゼン%').count

$ rails generate scaffold_controller Book title:string

config/routes.rb:
Myapp::Application.routes.draw do
resources :books
end

http://aws.amazon.com/articles/8621639827664165 より

class Book < AWS::Record::Base
string_attr :title
end

Book.new(:title => 'スベらないプレゼン').save

Railsと違和感なしに
Book.where('title like ?', '%プレゼン%').count

統合できる！
$ rails generate scaffold_controller Book title:string

config/routes.rb:
Myapp::Application.routes.draw do
resources :books
end

http://aws.amazon.com/articles/8621639827664165 より

Java

• AWS SDK for Javaには低レベルAPIしかな
いのだよ。

• JPA実装とかはあるけど…
https://github.com/appoxy/simplejpa

DynamoDBには
DataMapperが
あるのだよ(；́Д｀)

@DynamoDBTable(tableName = "BookTable")
public class Book {
private Long id;
private String title;

@DynamoDBHashKey
public Long getId() {
" return this.id;
}

@DynamoDBAttribute(attributeName = "title")
public String getTitle() {
" return this.title;
}

// 以下、setter
}

使用例
（DynamoDBMapper）
AWSCredentials cred = new BasicAWSCredentials(
"アクセスキ", "シークレットキー");
AmazonDynamoDB db = new AmazonDynamoDBClient(cred);

DynamoDBMapper mapper = new DynamoDBMapper(db);

Long key = 105L;
Book book = mapper.load(Book.class, key);
book.setTitle("スベらないプレゼン");
mapper.save(book);
mapper.delete(book);

なぜSimpleDBに
は無いのだ！

ついカッとなって
つくってみたw

@SimpleDBDomain(domainName = "BookDomain")
public class Book {

@SimpleDBItemName
public Long id;

@SimpleDBAttribute(attributeName = "title")
public String title;

}

使用例
（SimpleDBMapper）
AWSCredentials cred = new BasicAWSCredentials(
"アクセスキ", "シークレットキー");
AmazonSimpleDB db = new AmazonSimpleDBClient(cred);

SimpleDBMapper mapper = new SimpleDBMapper(db);

Long key = 105L;
Book book = mapper.load(Book.class, key);
book.setTitle("スベらないプレゼン");
mapper.save(book);
mapper.delete(book);

DynamoをSimple
に変えただけ（笑）

simpledb-mapper（笑）

• DynamoDBMapperライクなAPI（笑）

• でもパクっただけじゃない

• 1024byteを超えるデータ（Blob）はS3に

• @SimpleDBVersionでOptimistic
Lock（Conditional PUT/DELETE）

• 検索APIにはナウいFluent Interface採用

ナウな感じに書ける

List<Book> books =
mapper.from(Book.class).
where("title", Like, "%スベる%").
and("price", GreaterThan, 1000).
orderBy("price", DESC).
limit(10).
fetch();

使用上のご注意

• 自分が現状必要としていないものは実装
していません（笑）

• リレーション機能は持たせないつもりで
す。（Simpleじゃなくなるので）

• テストは適当です（これはひどい）

dateofrock/
simpledb-mapper
（笑）

気が向いたら
Forkしてね

残りは後日
ブログに書きますw


Thank you!


AWS小ネタ集

More Related Content

AWS小ネタ集