巨大ãªCSVファイルをRailsã§å‡¦ç†ã•ã›ã‚‹ - Qiitaã¯ã˜ã‚ã« 20MBを超ãˆã‚‹CSVã®å‡¦ç†ã‚’è¡Œã†å¿…è¦ãŒå‡ºã¦ãã¦ã€å³å¾€å·¦å¾€ã—ãŸã®ã§ãã®ãƒ¡ãƒ¢ã‚’残ã—ã¾ã™ã€‚ 当åˆã¯å¤§ããã¦ã‚‚ファイルサイズã¯3MBã ã£ãŸã®ã§ã€ãƒªã‚¯ã‚¨ã‚¹ãƒˆå†…ã§å‡¦ç†ã‚’ã•ã›ã¦ã„ã¾ã—ãŸã€‚（ã“ã®å¯¾å¿œã«ã‚‚å•é¡ŒãŒã‚ã‚Šã¾ã™ãŒã€‚。。） ã—ã‹ã—ã€å®Ÿéš›ã®ãƒ‡ãƒ¼ã‚¿ã‚’もらã£ãŸã‚‰20MBを超ãˆã‚‹ãƒ•ã‚¡ã‚¤ãƒ«ãŒä¸€ã¤å…¥ã£ã¦ã„ã¦ã€ãƒªã‚¯ã‚¨ã‚¹ãƒˆå†…ã§å‡¦ç†ã‚’ã•ã›ã‚‹ã«ã¯é™ç•ŒãŒå‡ºã¦ãã¾ã—ãŸã€‚ ãã“ã§è‰²ã€…模索ã—ã¦å‡ºã—ãŸçµè«–を載ã›ã¦ãŠãã¾ã™ã€‚ ãªãŠã€æœ¬å‡¦ç†ã¯æ¥å‹™ã®ä¸€ç’°ã§ç™ºç”Ÿã™ã‚‹CSVアップãƒãƒ¼ãƒ‰å‡¦ç†ã«ãªã‚Šã¾ã™ã€‚ é »åº¦ã¯å¹´ã«æ•°å›žã¨ã„ã†ãƒ¬ãƒ™ãƒ«ã®ã‚‚ã®ã§ã€ä»¥ä¸‹ã®ã‚ˆã†ãªå¯¾å¿œã‚’ã—ã¦ã„ã¾ã™ã€‚ 予算も時間もã‚ã‚‹æ–¹ã¯ãƒ‡ãƒ¼ã‚¿ãƒ¼ã‚µãƒ¼ãƒãƒ¼ã¨é…延ãƒãƒƒãƒï¼ˆã‚‚ã—ãã¯ã‚¹ã‚±ã‚¸ãƒ¥ãƒ¼ãƒ©ãƒ¼ï¼‰ã‚’組ã¿åˆã‚ã›ãŸã»ã†ãŒç„¡é›£ã ã¨æ€ã„ã¾ã™ã€‚ ã‚„ã‚ŠãŸã„事 1ç³»2ç³»ã¨è¨€ã†ä¸€èˆ¬çš„ãªå†—長化ã—ã¦ã„るサーãƒãƒ¼ã§å¤§å®¹é‡ã®CSVをアップデートã—ã¦ã€RDSã«ãƒ‡ãƒ¼ã‚¿ã‚’インサートã—ãŸã„。 困る点 冗長化ã•ã‚Œã¦ã„
Nginxè¨å®šã®ã¾ã¨ã‚
{{#tags}}- {{label}}
{{/tags}}