S3ã®ãƒ‡ãƒ¼ã‚¿ã‚’RStudioã¨sparklyrã§åˆ†æžã™ã‚‹RStudio社ãŒæä¾›ã—ã¦ã„ã‚‹sparklyrを使ã†ã¨ã€Sparkクラスターã«æ ¼ç´ã•ã‚Œã¦ã„る大è¦æ¨¡ãªãƒ‡ãƒ¼ã‚¿ã«å¯¾ã—ã¦ã€æ™®æ®µãŠä½¿ã„ã®R言語ã‹ã‚‰ç°¡å˜ã«å‡¦ç†ã‚’ã™ã‚‹ã“ã¨ãŒå‡ºæ¥ã¾ã™ã€‚ sparklyrã¨ã¯ã€å¤§è¦æ¨¡ãªãƒ‡ãƒ¼ã‚¿ã«å¯¾ã—ã¦ã‚‚Rを使ã„容易ã«æ“作ã§ãるパッケージã§ã™ã€‚Rユーザーã«äººæ°—ã®dplyrã¨å‘¼ã°ã‚Œã‚‹ãƒ‘ッケージã®ãƒãƒƒã‚¯ã‚¨ãƒ³ãƒ‰ã¨ã—ã¦å‹•ãã€Sparkを直接æ„è˜ã™ã‚‹ã“ã¨ãªã大è¦æ¨¡ãªãƒ‡ãƒ¼ã‚¿ã‚’扱ã†ã“ã¨ãŒå‡ºæ¥ã¾ã™ã€‚Clouderaã§ã¯ã€Pythonã®ãƒ‡ãƒ¼ã‚¿åˆ†æžç”¨ã®ãƒ©ã‚¤ãƒ–ラリpandasã‹ã‚‰Impalaを使ã£ã¦ãƒ‡ãƒ¼ã‚¿åˆ†æžã‚’ã—ã‚„ã™ãã—ãŸIbisã¨ã„ã†ãƒ‘ッケージを開発ã—ã¦ã„ã¾ã™ãŒã€ã“ã‚Œã®R+Spark版ã¨è¨€ã£ã¦ã‚‚éŽè¨€ã§ã¯ãªã„ã§ã—ょã†ã€‚ sparklyrã«èˆˆå‘³ã‚’ã‚‚ã£ãŸãªã‚‰ã€å…¬å¼ãƒ‰ã‚ュメントã‹ã‚‰å§‹ã‚ã‚‹ã¨ã„ã„ã§ã—ょã†ã€‚ ã‚‚ã—ãã¯ã€Cloudera Directorã§Sparkクラスターを簡å˜ã«ã¤ãã‚Šã€ãã‚Œã¨sparkl
Analyzing US flight data on Amazon S3 with sparklyr and Apache Spark 2.0 - Cloudera Blog
{{#tags}}- {{label}}
{{/tags}}