Hadoop/Storm ã®çµ±åˆã‚’実ç¾ã™ã‚‹ Twitter ã® SummingBird - Okapies' ArchiveTwitter ㌠SummingBird ã‚’æ£å¼ãƒªãƒªãƒ¼ã‚¹ã—ã¦æ—©äºŒãƒ¶æœˆã€‚「日本語ã®ç´¹ä»‹è¨˜äº‹ãŒã»ã¨ã‚“ã©å‡ºã¦ãªã„ãªã€ã¨æ°—付ã„ãŸã®ã§ã€èª¿æŸ»ãŒã¦ã‚‰ã¾ã¨ã‚ã¦ã¿ã¾ã—ãŸã€‚ SummingBird ã¨ã¯ï¼Ÿ MapReduce ãªãƒ—ãƒã‚°ãƒ©ãƒ を書ããŸã‚ã® Scala/Java ライブラリ。最大ã®ç‰¹å¾´ã¯ã€ã²ã¨ãŸã³ SummingBird ã§æ›¸ã„ãŸã‚¸ãƒ§ãƒ–㯠Hadoop ã§ã‚‚ Storm ã§ã‚‚åŒã˜ã‚ˆã†ã«å®Ÿè¡Œã§ãã‚‹ã“ã¨ã€‚ SummingBird ã§ã¯ã€Hadoop を使ã†ã€Œãƒãƒƒãƒãƒ¢ãƒ¼ãƒ‰ã€ã¨ã€Storm を使ã†ã€Œãƒªã‚¢ãƒ«ã‚¿ã‚¤ãƒ モードã€ã«åŠ ãˆã¦ã€äºŒã¤ã‚’åŒæ™‚ã«å®Ÿè¡Œã™ã‚‹ã€Œãƒã‚¤ãƒ–リッドモードã€ãŒã‚る。ãƒã‚¤ãƒ–リッドモードã§ã¯ã€ã‚¸ãƒ§ãƒ–ã®ä½œè€…ãŒç‰¹ã«é…æ…®ã—ãªãã¦ã‚‚ã€ãƒãƒƒãƒã¨ãƒªã‚¢ãƒ«ã‚¿ã‚¤ãƒ ã®å‡¦ç†çµæžœã‚’自動的ã«ãƒžãƒ¼ã‚¸ã§ãる。 ãƒã‚¤ãƒ–リッドモードã§ã¯ã€åŒã˜ã‚¸ãƒ§ãƒ–ã‚’ Hadoop 㨠Storm ã§åŒæ™‚ã«å®Ÿè¡Œã§ãã‚‹ã®ã§ã€Hadoop ã®è€éšœå®³æ€§
å¹³æˆï¼’１年度産å¦é€£æºã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢å·¥å¦å®Ÿè·µäº‹æ¥ï¼ˆé«˜ä¿¡é ¼ã‚¯ãƒ©ã‚¦ãƒ‰å®Ÿç¾ç”¨ã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢é–‹ç™ºï¼ˆåˆ†æ•£åˆ¶å¾¡å‡¦ç†æŠ€è¡“ç‰ã«ä¿‚るデータセンターã®é«˜ä¿¡é ¼åŒ–ã«å‘ã‘ãŸå®Ÿè¨¼äº‹æ¥ï¼‰ï¼‰äº‹æ¥æˆæžœå ±å‘Šæ›¸
Hadoopを使ã„ã“ãªã™(1)
{{#tags}}- {{label}}
{{/tags}}