Hiveã®ãƒ™ã‚¹ãƒˆãƒ—ラクティス(ã‹ã‚‚ã—ã‚Œãªã„ã“ã¨)ã‚’ã‚ã‚‚ã£ã¦ãŠã - wyukawa's diaryHiveã®ç¾å ´ã«æ¥ã¦4ã‹æœˆçµŒã¡å›žã‚Šã®ã‚„り方を観察ã—ãŸã‚Šã€ä»–ã®äº‹ä¾‹ã‚’調ã¹ãŸã‚Šã—ã¦ã„ã‚‹ã†ã¡ã«Hiveを使用ã™ã‚‹éš›ã®ãƒ‘ターンã¨ã„ã†ã‹ãƒ™ã‚¹ãƒˆãƒ—ラクティスãŒè¦‹ãˆã¦ããŸæ°—ãŒã™ã‚‹ã®ã§æ›¸ã„ã¦ã¿ã‚‹ã‚ˆã€‚ ユースケースã¯ãƒã‚°è§£æžã§ã™ã€‚ 1. ファイルフォーマットã¨åœ§ç¸® ãƒã‚°ã¯åœ§ç¸®çŽ‡é«˜ã„ã®ã§åœ§ç¸®ã™ã¹ã—。ã§ã‚‚スプリットå¯èƒ½ã§ã‚ã‚‹ãŸã‚ã«ã¯ã£ã¦ã“ã¨ã§SequenceFileã§ãƒ–ãƒãƒƒã‚¯åœ§ç¸®ã¯ç¢ºå®šã€‚ 圧縮コーデックã¯åœ§ç¸®çŽ‡ã‚’考ãˆã¦gzip。 ã¡ãªã¿ã«åœ§ç¸®çŽ‡ã¯ bzip2>gzip>LZO ã§ã‚¹ãƒ”ード㯠LZO>gzip>bzip2 ã 。bzipã¯ã‚¹ãƒ—リットå¯èƒ½ã§åœ§ç¸®çŽ‡ã‚‚高ã„ã‚“ã ã‘ã©Hadoop 0.20ç³»ã§ã¯ã¾ã 使ãˆãªã‹ã£ãŸã¨æ€ã†ã€‚Hadoop 0.20ç³»ã§ã‚‚使ãˆã‚‹ã‚‰ã—ã„ã§ã™ãŒé…ãã¦ä½¿ã„物ã«ãªã‚‰ãªã„よã†ã§ã™ã€‚ 最近ã¯snappyãªã‚“ã¦ã®ã‚‚出ã¦ã¦CDH3 Update 1ã§ä½¿ãˆã‚‹ã‚ˆã†ã«ãªã‚Šã¾ã—ãŸã。 snappyã¯åœ§ç¸®çŽ‡ã¯L
{{#tags}}- {{label}}
{{/tags}}