1秒動画ã®ã¤ãã‚Šæ–¹ ― 「家æ—アルãƒãƒ ã¿ã¦ãã€ã«ãŠã‘る動画エンコードパイプラインã¨ãã®æœ€é©åŒ–事例 | gihyo.jp
ãªãŠä¸Šè¨˜ã®ã€Œå¤§é‡é…ä¿¡ã€ã¨ã¯ã€ã€Œâ 1～3月分ã®å››å£ç‰ˆã‚’4月15æ—¥ã‹ã‚‰é…信開始ã—ã€1週間ã§å…¨å®¶æ—ã«é…信完了ã™ã‚‹ã€ãªã©ã®ã‚ˆã†ã«ã€ã€Œâ æ–°ã—ã„期間ã®1秒動画をã¯ã˜ã‚ã¦é…ä¿¡ã—ã¦ã‹ã‚‰ã€ãã®æ™‚点ã§æ¡ä»¶ã‚’満ãŸã™å…¨å®¶æ—ã¸ã®é…ä¿¡ãŒå®Œäº†ã™ã‚‹ã¾ã§ã€ã®æœŸé–“を指ã—ã¾ã™ã€‚1秒動画ã®ç”Ÿæˆãƒ»é…ä¿¡ã®å¤§éƒ¨åˆ†ã¯ã“ã®å¤§é‡é…信期間ã«è¡Œã£ã¦ã„ã‚‹ã“ã¨ã‹ã‚‰ã€ã“れを「大é‡é…ä¿¡ã€ã¨å‘¼ã‚“ã§ã„ã¾ã™ã€‚ 生æˆâ ・é…ä¿¡ã®æµã‚Œ 1秒動画ã®ç”Ÿæˆãƒ»é…ä¿¡ã¯ã€å›³1ã®ã¨ãŠã‚Š(1)対象家æ—抽出ã€(2)ç´ æé¸æŠžã€(3)動画エンコードã€(4)é…ä¿¡ã€ã®4段階ã§å®Ÿç¾ã—ã¦ã„ã¾ã™ã€‚以下ã§ã¯ãã®è©³ç´°ã‚’説明ã—ã¾ã™ã€‚ 図1 1秒動画ã®ç”Ÿæˆãƒ»é…ä¿¡ã®æµã‚Œ (1)対象家æ—抽出 1秒動画ã®ç”Ÿæˆãƒ»é…信処ç†ã¯ã€åŸºæœ¬çš„ã«ã¯ãƒãƒƒãƒå‡¦ç†ã¨ã—ã¦æ¯Žæ—¥å®Ÿè¡Œã—ã¦ã„ã¾ã™ã€‚ãã®ã¯ã˜ã‚ã«è¡Œã†ã®ã¯ã€ã€Œâ ãã®æ—¥ã€ã©ã®å®¶æ—ã«ã€ã©ã®ãƒãƒ¼ã‚¸ãƒ§ãƒ³ãƒ»ã©ã®æœŸé–“ã®1秒動画を生æˆãƒ»é…ä¿¡ã™ã‚‹ã‹ã€ã‚’å–り出ã™å¯¾è±¡å®¶æ—抽出ã§ã™ã€‚ã“ã®å‡¦ç†ã¯å››å£ç‰ˆ
ãƒãƒƒã‚¯ã‚°ãƒ©ã‚¦ãƒ³ãƒ‰ã§å®Ÿè¡Œã™ã‚‹ãƒãƒƒãƒå‡¦ç†ã®æ”¹å–„ã®ãŸã‚Sidekiq Enterpriseã‚’å°Žå…¥ã—ã¾ã—ãŸðŸ¥³ - メドピア開発者ブãƒã‚°
ã“ã‚“ã«ã¡ã¯ã€ã‚¨ãƒ³ã‚¸ãƒ‹ã‚¢ã®æ£®ç”°ã§ã™ã€‚ MedPeerã§ã¯ã€ãƒãƒƒã‚¯ã‚°ãƒ©ã‚¦ãƒ³ãƒ‰ã§éžåŒæœŸã«å‡¦ç†ã‚’実行ã•ã›ã‚‹æ–¹æ³•ã¨ã—ã¦Sidekiqを使ã£ã¦ãŠã‚Šã¾ã—ãŸãŒã€ä»Šå›žSidekiq Enterprise(Proã‚’å«ã‚€)ã‚’å°Žå…¥ã—ã¾ã—ãŸã€‚ https://sidekiq.org/products/enterprise.html 今回ã¯Sidekiq Enterpriseã‚’å°Žå…¥ã™ã‚‹ã«ã‚ãŸã£ã¦è§£æ±ºã—ãŸã‹ã£ãŸèª²é¡Œã¨å®Ÿéš›ã®å°Žå…¥æ–¹æ³•ã€å°Žå…¥å¾Œã®æ´»ç”¨äº‹ä¾‹ã‚’を紹介ã§ãã‚Œã°ã¨æ€ã„ã¾ã™ï¼ Sidekiq Enterpriseã¨ã¯? Sidekiq Enterpriseã¨ã¯ã€ãã®åã®é€šã‚Šã‚¨ãƒ³ã‚¿ãƒ¼ãƒ—ライズå‘ã‘ã®æ©Ÿèƒ½æ‹¡å¼µãŒè¡Œã‚ã‚ŒãŸæœ‰æ–™ç‰ˆã®Sidekiqã§ã™ã€‚(Sidekiq Enterpriseã¨ã¯åˆ¥ã«Sidekiq Proã‚‚ã‚ã‚Šã¾ã™ãŒã€Sidekiq Enterpriseã‚’å°Žå…¥ã™ã‚‹ã¨Sidekiq Proã®æ©Ÿèƒ½ã‚‚使用出æ¥ã‚‹ã‚ˆã†ã«ãªã‚Šã¾
Sidekiq Enterpriseを使ㆠ- Studyplus Engineering Blog
ãŠä¹…ã—ã¶ã‚Šã§ã™ã€‚サーãƒãƒ¼ã‚µã‚¤ãƒ‰ã‚¨ãƒ³ã‚¸ãƒ‹ã‚¢ã®èŠ±äº•ã§ã™ã€‚ ã¿ãªã•ã‚“ã¯éžåŒæœŸå‡¦ç†ã«ä½•ã‚’ãŠä½¿ã„ã§ã™ã‹ï¼Ÿ ActiveJobã§ã—ょã†ã‹ï¼Ÿ Resqueã§ã—ょã†ã‹ï¼Ÿ Sidekiqã§ã—ょã†ã‹ï¼Ÿ 弊社ã§ã¯æ´å²çš„経緯ã‹ã‚‰ã€ä¸Šè¨˜å…¨ã¦ã®gemをプãƒãƒ€ã‚¯ãƒˆã§ä½¿ã£ã¦ã„ã¾ã™ãŒã€ ã“ã®åº¦Sidekiq Enterpriseã‚’å°Žå…¥ã—ã¦éžåŒæœŸå‡¦ç†ã®çµ±ä¸€ã«ç€æ‰‹ã—ã¾ã—ãŸã€‚ Sidekiq Enterpriseã®æ—¥æœ¬èªžè¨˜äº‹ãŒã‚ã¾ã‚Šãªã‹ã£ãŸã®ã§ã€åˆ©ç”¨ã®æ¤œè¨Žã‚„実際ã«ä½¿ã†éš›ã®æ³¨æ„点ãªã©ã‚’紹介ã§ãã‚Œã°ã¨æ€ã„ã¾ã™ã€‚ What is Sidekiq Sidekiqã¯Ruby製ã®éžåŒæœŸå‡¦ç†ãƒ•ãƒ¬ãƒ¼ãƒ ワークã§ã™ã€‚ resqueを使ã†ã¨ã€ã‚¸ãƒ§ãƒ–ã®ãƒªãƒˆãƒ©ã‚¤ã¨ãƒ¦ãƒ‹ãƒ¼ã‚¯æ€§ã®æ‹…ä¿ã®ãŸã‚ã«è‡ªå‰ã§å®Ÿè£…ãŒå¿…è¦ã§ã¤ã‚‰ã„ã®ã§ã€sidekiqã®æŽ¡ç”¨ã«è‡³ã‚Šã¾ã—ãŸã€‚ ã¾ãŸã€éžåŒæœŸå‡¦ç†ã®æµé‡ã‚’制é™ã—ãŸã„(特ã«å¤–部サービスã¸ã®å•ã„åˆã‚ã›ãŒç™ºç”Ÿã™ã‚‹æ‰€)ã¨ã„ã†æ„図ãŒã‚ã‚Šã€Ent
Sidekiq Enterpriseã®åŒæ™‚実行数制御をç†è§£ã™ã‚‹ - Studyplus Engineering Blog
ã“ã‚“ã«ã¡ã¯ã€‚サーãƒãƒ¼ã‚µã‚¤ãƒ‰ã‚°ãƒ«ãƒ¼ãƒ—ã®å±±ç”°ã§ã™ã€‚ 最近クãƒã‚¹ãƒã‚¤ã‚¯ã‚’è²·ã£ã¦è‡ªè»¢è»Šã§èµ°ã‚‹ã“ã¨ã«ã¯ã¾ã£ã¦ã„ã¾ã™ã€‚ 弊社ã§ã¯Railsアプリケーションã®éžåŒæœŸå‡¦ç†ã‚„ãƒãƒƒãƒå‡¦ç†ã§Sidekiq/Sidekiq Enterpriseを使用ã—ã¦ã„ã¾ã™ã€‚ tech.studyplus.co.jp Sidekiq Enterpirseã«ã¯ä¾¿åˆ©ãªæ©Ÿèƒ½ãŒå¤šãã‚ã‚Šã¾ã™ãŒã€ä»Šå›žã¯ Rate limiting ã® Concurrent ã«ã¤ã„ã¦æ›¸ã„ã¦ã„ãã¾ã™ã€‚ ãªãœConcurrentã‹ã¨ã„ã†ã¨ã€å…ˆæ—¥ã“ã®è¨å®šå†…容ãŒåŽŸå› ã§æƒ³å®šå¤–ã«å¤§é‡ã®å¾…機ジョブを発生ã•ã›ã¦ã—ã¾ã£ãŸãŸã‚ã§ã™ã€‚ ãã®å¤±æ•—を交ãˆã¦ç´¹ä»‹ã—ã¦ã„ãã¾ã™ã€‚ TL;DR Rate Limitingã®Concurrentを使ã†å ´åˆ ジョブã®å‡¦ç†æ™‚é–“ã«åˆã‚ã›ãŸlock_timeoutã‚’è¨å®šã™ã‚‹ ジョブã®å‡¦ç†ã‚’ä¿®æ£ã™ã‚‹å ´åˆã¯lock_timeoutも見直㙠Sidekiq
#366 Sidekiq - RailsCasts
Download: source codeProject Files in Zip (59.6 KB)mp4Full Size H.264 Video (30.6 MB)m4vSmaller H.264 Video (13.4 MB)webmFull Size VP8 Video (14.5 MB)ogvFull Size Theora Video (29.4 MB) Railsã«ã¯ã€å®Ÿè¡Œæ™‚é–“ã®é•·ã„ジョブをãƒãƒƒã‚¯ã‚°ãƒ©ã‚¦ãƒ³ãƒ‰ãƒ—ãƒã‚»ã‚¹ã«ç§»ã™ãŸã‚ã®ãƒ„ールãŒã„ãã¤ã‚‚ã‚ã‚Šã¾ã™ã€‚ãã‚Œãžã‚ŒãŒå›ºæœ‰ã®é•·æ‰€ã‚’æŒã£ã¦ã„ã¾ã™ãŒã€Sidekiqも例外ã§ã¯ã‚ã‚Šã¾ã›ã‚“。Sidekiqã¯ã€ã‚¨ãƒ”ソード271ã§å–り上ã’ãŸResqueã«ä¼¼ã¦ã„ã¾ã™ã€‚主ãªé•ã„ã¯ã€ãƒ—ãƒã‚»ã‚¹ã®ä»£ã‚ã‚Šã«ã‚¹ãƒ¬ãƒƒãƒ‰ã‚’使用ã™ã‚‹ã“ã¨ã«ã‚ˆã£ã¦è¤‡æ•°ã®ã‚¸ãƒ§ãƒ–ã‚’åŒæ™‚実行ã—メモリ使用é‡ã‚’節約ã§ãã‚‹ã¨ã„ã†ç‚¹ã§ã™ã€‚ スニペットアプリケーション Sidekiqã®ã‚¤ãƒ³ã‚¿ãƒ¼ãƒ•ã‚§ãƒ¼
1
ランã‚ング
ãŠçŸ¥ã‚‰ã›
ランã‚ング
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
Batches
Really Complex Workflows with Batches
{{#tags}}- {{label}}
{{/tags}}