EC2ã§ç„¡æ–™ã‚¿ã‚¹ã‚¯ç®¡ç† 〜マイクãƒã‚¤ãƒ³ã‚¹ã‚¿ãƒ³ã‚¹ã«Redmine1.1.2をセットアップ ãã®4 - hrendohã®æ—¥è¨˜
ã“ã“数回ã®ãƒ–ãƒã‚°ã§ã€EC2 マイクãƒã‚¤ãƒ³ã‚¹ã‚¿ãƒ³ã‚¹ã«Redmineを利用ã—ãŸã‚¿ã‚¹ã‚¯(プãƒã‚¸ã‚§ã‚¯ãƒˆ)管ç†ã‚·ã‚¹ãƒ†ãƒ を構築ã«ã¤ã„ã¦èª¬æ˜Žã—ã¦ãã¾ã—ãŸã€‚ EC2ã§ç„¡æ–™ã‚¿ã‚¹ã‚¯ç®¡ç† 〜マイクãƒã‚¤ãƒ³ã‚¹ã‚¿ãƒ³ã‚¹ã«Redmine1.1.2をセットアップ ãã®1ã§ã¯ã€AWSアカウントã®ä½œæˆã‹ã‚‰ã‚¤ãƒ³ã‚¹ã‚¿ãƒ³ã‚¹ä½œæˆã¾ã§ EC2ã§ç„¡æ–™ã‚¿ã‚¹ã‚¯ç®¡ç† 〜マイクãƒã‚¤ãƒ³ã‚¹ã‚¿ãƒ³ã‚¹ã«Redmine1.1.2をセットアップ ãã®2ã§ã¯ã€EC2インスタンスã«Redmineをインストールã—ã¦Gmailã«é€šçŸ¥ãƒ¡ãƒ¼ãƒ«ã‚’é€ä¿¡ã™ã‚‹è¨å®šã‚’ã™ã‚‹ã¨ã“ã‚ã¾ã§ EC2ã§ç„¡æ–™ã‚¿ã‚¹ã‚¯ç®¡ç† 〜マイクãƒã‚¤ãƒ³ã‚¹ã‚¿ãƒ³ã‚¹ã«Redmine1.1.2をセットアップ ãã®3ã§ã¯ã€Subversionをインストールã—ã¦Redmineã¨é€£æºã™ã‚‹ã¨ã“ã‚ã¾ã§ ã“れらã®è¨˜äº‹ã¯ä»¥ä¸‹ã®æµã‚Œã§è§£èª¬ã—ã¦ã„ã¾ã™ã€‚ EC2 マイクãƒã‚¤ãƒ³ã‚¹ã‚¿ãƒ³ã‚¹ä½œæˆ Redmine 1.1.2をインストール Gmail
『S3ã¸ã®ãƒ•ã‚¡ã‚¤ãƒ«ã‚¢ãƒƒãƒ—ãƒãƒ¼ãƒ‰(s3sync)ã€
S3ã«ã‚³ãƒžãƒ³ãƒ‰ãƒ©ã‚¤ãƒ³ã§ãƒ•ã‚¡ã‚¤ãƒ«ã‚¢ãƒƒãƒ—ã™ã‚‹æ–¹æ³•ã‚’探ã™ã€‚ s3syncã¨ã„ã†ã®ã‚’見ã¤ã‘ãŸã®ã§è©¦ã—ã¦ã¿ã‚‹ã€‚ ã¾ãšã¯ã‚½ãƒ¼ã‚¹ã‚²ãƒƒãƒˆ # wget http://s3.amazonaws.com/ServEdge_pub/s3sync/s3sync.tar.gz 解å‡ã—ã¦é©å½“ãªã¨ã“ã«è¨ç½®ã€ãƒ‘スも通ã—ã¨ã # tar zxvf s3sync.tar.gz # mv s3sync /path/to/ configファイルを置ãå ´æ‰€ã‚’ä½œæˆ # mkdir /etc/s3conf/ configをコピー # cp /path/to/s3sync/s3config.yml.example /etc/s3conf/s3config.yml s3config.yml変数 # vi s3config.yml aws_access_key_id: 11111111111111111111111 aws_secret_a
s3cmdã§ã€[Errno 32] Broken pipe ã¨å‡ºãŸæ™‚ã®å¯¾å‡¦
s3cmd を使ã£ã¦ã€Jenkinsã®ã‚¸ãƒ§ãƒ–ã‚’s3ã«é€±æ¬¡ã§ãƒãƒƒã‚¯ã‚¢ãƒƒãƒ—ã—ã¦ã‚‹ã®ã§ã™ãŒã€ ã‚る時ã‹ã‚‰ã€ $ s3cmd -f put /tmp/jenkins_bk.tar.gz s3://hogehoge/ /tmp/jenkins_bk.tar.gz -> s3://hogehoge/jenkins_bk.tar.gz [1 of 1] 7725056 of 5660650889 0% in 1s 7.02 MB/s failed WARNING: Upload failed: /jenkins_bk.tar.gz ([Errno 32] Broken pipe) WARNING: Retrying on lower speed (throttle=0.00) WARNING: Waiting 3 sec... ã¨ã‹å‡ºã¦ã€ã‚¢ãƒƒãƒ—ãƒãƒ¼ãƒ‰å‡ºæ¥ãªããªã‚Šã¾ã—ãŸã€‚ãã®éš›ã®å¯¾å‡¦æ³•ã®ãƒ¡ãƒ¢ã§ã™ã€‚ S3ã®
ããšã¿ã®å¤§è¡Œé€² Σ≡≡ヾ(=￣ω￣)ﾉ : s3sync.rb パラレル（並列）処ç†
2010å¹´02月14æ—¥16:07 カテゴリAmazon Web ServicesAmazon S3 s3sync.rb ãƒ‘ãƒ©ãƒ¬ãƒ«ï¼ˆä¸¦åˆ—ï¼‰å‡¦ç† å‰å›žã¯s3sync.rbã®ä½¿ã„方を書ãã¾ã—ãŸã€‚ 実際ã«ãƒ•ã‚¡ã‚¤ãƒ«ã‚’アップãƒãƒ¼ãƒ‰ã™ã‚‹ã¨çµæ§‹æ™‚間㌠ã‹ã‹ã‚Šã¾ã™ã€‚ ãã“ã§ã€ãƒ‘ラレルã«ãƒ•ã‚¡ã‚¤ãƒ«ã‚’アップãƒãƒ¼ãƒ‰ã—ãŸã„ã¨æ€ã„ã¾ã™ã€‚ ■内容  ルートディレクトリをアップãƒãƒ¼ãƒ‰ã™ã‚‹ã®ã§ã¯ãªã  何階層ã‹é™ã‚ŠãŸãƒ‡ã‚£ãƒ¬ã‚¯ãƒˆãƒªã‚’アップãƒãƒ¼ãƒ‰ã™ã‚‹ã€‚  ※下記ã¯root/å¹´/月/日付/記事番å·/イメージファイルãŒã‚ã‚Š    日付毎ã«ã‚¢ãƒƒãƒ—ãƒãƒ¼ãƒ‰ã‚’ã—ã¾ã™ã€‚   (例)  images -- 2009 -- 12 -- 01 -- 1000 -- xxx.png                 01 -- 1200 -- xxx.png                15 --
Amazon S3ã‚’ãƒãƒƒã‚¯ã‚¢ãƒƒãƒ—ストレージã«ä½¿ã† - rabbit2goã®ãƒ–ãƒã‚°
パソコンã®ãƒ‡ãƒ¼ã‚¿ã®æ¶ˆå¤±ã«ã¯æ°—を使ã£ã¦ã„ã‚‹ã®ã§ã€è¤‡æ•°ã®ãƒãƒƒã‚¯ã‚¢ãƒƒãƒ—ç–を講ã˜ã¦ã„る。 å„Macã«ã¯Time Machine 複数ã®ãƒ‘ソコン間ã§ã®ãƒãƒƒã‚¯ã‚¢ãƒƒãƒ—共有ã«ã¯Dropbox é 隔地ã®ã‚µãƒ¼ãƒã®ãƒãƒƒã‚¯ã‚¢ãƒƒãƒ—ã¯rsync ã—ã‹ã—ãªãŒã‚‰ã€æ±æ—¥æœ¬å¤§éœ‡ç½ã®è¢«å®³çŠ¶æ³ã‚’見ã¦ã„ã‚‹ã¨ã€Œå®¶ã®ä¸ã«ã‚るパソコンやストレージ機器ãŒå…¨æ»…ã€ã¨ã„ã†äº‹æ…‹ã‚‚ã‚ã‚Šå¾—ã‚‹ã®ã§ã€ã„ãら複数ã®æ©Ÿå™¨ã«ãƒ‡ãƒ¼ã‚¿ã‚’分散ã•ã›ã¦ã„ã¦ã‚‚効果ãŒç„¡ã„よã†ã 。抜本的ã«ã¯ã€ç‰©ç†çš„ã«é›¢ã‚ŒãŸå ´æ‰€ã«ãƒ‡ãƒ¼ã‚¿ã‚’ä¿å˜ã—ã¦ãŠãæ–¹ãŒæœ›ã¾ã—ã„ã‚ã‘ã 。 ãã‚“ãªè¨³ã§ã€ãƒãƒƒã‚¯ã‚¢ãƒƒãƒ—対ç–ã¨ã—ã¦Amazon S3ã‚’æœ¬æ ¼çš„ã«ä½¿ã„始ã‚ãŸã€‚転é€ãƒ„ールã¨ã—ã¦ã¯ã€rsyncåŒæ§˜ãªå½¢ã§ä½¿ãˆã‚‹s3syncを使ã„ã€cronã§å®šæœŸçš„ã«ã‚¢ãƒƒãƒ—ãƒãƒ¼ãƒ‰ã™ã‚‹ã‚ˆã†ã«è¨å®šã—ãŸã€‚ 「S3Syncã€ã¯ã€rsyncã®ã‚ˆã†ãªä½¿ã„æ–¹ã§ã€ãƒãƒ¼ã‚«ãƒ«ãƒ‡ã‚£ã‚¹ã‚¯ã®ç‰¹å®šéƒ¨åˆ†ã¨ã€ŒAmazon S3ã€ã®ã‚¹ãƒˆãƒ¬ãƒ¼ã‚¸é–“ã‚’åŒæœŸï¼ˆãƒŸãƒ©ãƒ¼ãƒªãƒ³ã‚°ï¼‰ã§
S3Syncを使ã£ã¦ãƒãƒ¼ã‚«ãƒ«ãƒ‡ã‚£ãƒ¬ã‚¯ãƒˆãƒªã‹ã‚‰Amazon S3ã«ãƒ•ã‚¡ã‚¤ãƒ«ã‚’アップãƒãƒ¼ãƒ‰ã™ã‚‹ - 祈れã€ãã—ã¦åƒã‘ ～ Ora et labora
ã¾ãšã¯S3Syncをインストールã—ã¾ã™ã€‚ $ wget http://s3.amazonaws.com/ServEdge_pub/s3sync/s3sync.tar.gz $ tar zxvf s3sync.tar.gz $ sudo cp -pr s3sync/ /usr/local/ãƒãƒ¼ã‚«ãƒ«ãƒ‡ã‚£ãƒ¬ã‚¯ãƒˆãƒªã¨Amazon S3é–“ã®é€šä¿¡ã«SSLを使ã„ãŸã„ã®ã§ã€ssl.certs.sharをダウンãƒãƒ¼ãƒ‰ã—ã¦å®Ÿè¡Œã—ã¾ã™ã€‚ $ mkdir /usr/local/s3sync/certs $ cd /usr/local/s3sync/certs $ wget http://mirbsd.mirsolutions.de/cvs.cgi/~checkout~/src/etc/ssl.certs.shar $ sh ssl.certs.shar自動実行ã™ã‚‹ãŸã‚ã®ã‚¹ã‚¯ãƒªãƒ—トを用æ„ã—ã¾ã™ã€‚例ãˆã°ã€ã“ã‚“ãªã®ã€‚
S3Sync.rbã§S3ã«ãƒ•ã‚¡ã‚¤ãƒ«ã‚’ãƒãƒƒã‚¯ã‚¢ãƒƒãƒ—ã™ã‚‹ - azuki note
震ç½ã®å½±éŸ¿ã§çªç™ºçš„ãªåœé›»ã®å¯èƒ½æ€§ã‚‚ã‚ã‚ŠAmazon S3ã¸ã®ãƒãƒƒã‚¯ã‚¢ãƒƒãƒ—環境を構築ã—ã¾ã—ãŸã€‚S3ã«ãƒãƒ¼ã‚«ãƒ«ãƒ•ã‚¡ã‚¤ãƒ«ã‚’アップãƒãƒ¼ãƒ‰ã™ã‚‹ãƒ—ãƒã‚°ãƒ©ãƒ ã¯ã„ãã¤ã‹ã‚ã‚Šã¾ã™ãŒã€ã‚ªãƒ¼ãƒ—ンソースã®ã‚‚ã®ä¸å¿ƒã«ã„ãã¤ã‹è©¦ã—ã¦ã¿ãŸé™ã‚Šã¯ä»¥ä¸‹ãŒã‚ˆã•ãã†ã§ã™ã€‚ S3Sync.rb s3fs Cyberduck s3sync.rbã¯ã€S3ã«å¯¾ã—ã¦rsyncã®ã‚ˆã†ãªä½¿ã„æ–¹ã®ã§ãã‚‹Rubyスクリプトã§ã™ã€‚s3fsã¯S3をファイルシステムã¨ã—ã¦ãƒžã‚¦ãƒ³ãƒˆã™ã‚‹ãƒ—ãƒã‚°ãƒ©ãƒ ã§ã€ãƒãƒ¼ã‚«ãƒ«ã¨ã®åŒæœŸã‚’ã¨ã‚‹ãŸã‚ã§ã‚ã‚Œã°rsyncã¨ã‚ã‚ã›ã¦ä½¿ã†ã“ã¨ã«ãªã‚‹ã¨æ€ã„ã¾ã™ã€‚s3fsã®æ–¹ãŒS3ã‚’æ„è˜ã›ãšãƒ—ãƒã‚°ãƒ©ãƒ ã‹ã‚‰ã¯é€éŽçš„ã«ã‚¢ã‚¯ã‚»ã‚¹ã§ãã‚‹ã®ãŒãƒ¡ãƒªãƒƒãƒˆã§ã™ãŒã€ã€ä»Šå›žã¯Windows環境ã§ã‚‚使ãˆã‚‹s3sync.rbを使ã„ã¾ã—ãŸã€‚ 最後ã®Cyberduckã¯S3ã«ã‚‚対応ã—ãŸFTPクライアントã§ãƒ•ã‚©ãƒ«ãƒ€ã®åŒæœŸæ©Ÿèƒ½ã‚‚ã‚ã‚Šã¾ã™ã€‚Windowsã§GUIã‹ã‚‰æ“作ã—
クラウドã¨ã‚µãƒ¼ãƒãƒ¼ã‚’åŒæœŸã§ãる便利ツール「S3Sync〠～Amazon EC2/S3環境構築ã®ã™ã¹ã¦ï½ž
ã¯ã˜ã‚ã« å‰å›žã¯ã€ã€ŒAmazon EC2ã€ã®ãƒãƒƒã‚¯ã‚¢ãƒƒãƒ—ã¾ã‚ã‚Šã®è©±é¡Œã¨ã—ã¦ã€ã€ŒAmazon EBSã€ã®æ¦‚è¦ã‚„使ã„方を紹介ã—ã¾ã—ãŸã€‚ 今回ã¯ã€ŒAmazon EC2ã€ã‚’å–ã‚Šå·»ãデータãƒãƒƒã‚¯ã‚¢ãƒƒãƒ—ã®æ–¹æ³•ã®ä»˜éŒ²ã¨ã—ã¦ã€ã€ŒAmazon EC2ã€ã®ãƒ‡ãƒ¼ã‚¿ã‚’「Amazon S3ã€ã¨åŒæœŸã™ã‚‹ãƒ„ール「S3Syncã€ã‚’紹介ã—ã¾ã™ã€‚ å‰ææ¡ä»¶ 今回も「Amazon EC2 Command-Line Toolsã€ã‚’利用ã—ãŸæ–¹æ³•ã‚’紹介ã—ã¦ã„ãã¾ã™ã€‚作æ¥å‰æã¨ã—ã¦ã€åŸºæœ¬çš„ãªã‚»ãƒƒãƒˆã‚¢ãƒƒãƒ—ãŒçµ‚了ã—ã€ã€ŒAmazon EC2ã€ã‚¤ãƒ³ã‚¹ã‚¿ãƒ³ã‚¹ï¼ˆä»®æƒ³ãƒžã‚·ãƒ³ï¼‰ã¯èµ·å‹•ã—ã¦ã„ã‚‹ã‚‚ã®ã¨ã—ã¾ã™ã€‚セットアップや「Amazon EC2ã€ã§ã®ã‚¤ãƒ³ã‚¹ã‚¿ãƒ³ã‚¹èµ·å‹•ã«ã¤ã„ã¦ã¯ã€å‰å›žã¾ã§ã®è¨˜äº‹ã‚’å‚考ã«ã—ã¦ãã ã•ã„。 ã¾ãŸã€ä»Šå›žç´¹ä»‹ã™ã‚‹ãƒ„ール「S3Syncã€ã®åˆ©ç”¨ã«ã¯ã€åˆ¥é€”RubyãŒå¿…è¦ã¨ãªã‚Šã¾ã™ã€‚「Amazon S3ã€ã¸ã®æŽ¥ç¶šã«HTTPSを利用ã—ã¦ã„ã‚‹å ´åˆ
1
ランã‚ング
ランã‚ング
ランã‚ング
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
http://s3.amazonaws.com/ServEdge_pub/s3sync/README.txt
システムカスタマイズnote S3Sync.rbã§S3ã«ãƒ•ã‚¡ã‚¤ãƒ«ã‚’ãƒãƒƒã‚¯ã‚¢ãƒƒãƒ—構築
{{#tags}}- {{label}}
{{/tags}}