ãƒã‚°åˆ†æžç’°å¢ƒã‚’å°‘ã—ã¥ã¤ä½œã£ã¦ã‚‹ - wyukawa's diaryã¾ã æœ¬æ ¼çš„ãªé‹ç”¨ã¯å§‹ã¾ã£ã¦ã„ãªã„ã‘ã©ãƒã‚°åˆ†æžç’°å¢ƒã‚’å°‘ã—ã¥ã¤ä½œã£ã¦ã‚‹ã®ã§ãƒ¡ãƒ¢ã£ã¦ãŠã。 ETL処ç†ã¯æ—¢å˜è³‡ç”£ã®æ´»ç”¨ã‚’考慮ã—ã¦Python 2.7ã§ã‚„ã£ã¦ã„ã¾ã™ã€‚ hiveserver2ã¨ã®æŽ¥ç¶šã¯pythonã‹ã‚‰hiveserver2ã«ã¤ãªã”ã†ã¨ã—ã¦ã„ã‚ã„ã‚ãƒãƒžã£ãŸã®ã§ãƒ¡ãƒ¢ã£ã¦ãŠã - wyukawa’s blogã«æ›¸ã„ãŸé€šã‚Šã ã„ã¶è‹¦åŠ´ã—ãŸã‘ã©ç‹¬è‡ªã«patchã‚ã¦ã¦å¯¾å¿œã—ãŸã€‚ sqoop imortã‚‚ã‚„ã‚Šã¤ã¤ã‚る。最åˆã¯sqoop2を使ãŠã†ã‹ãªã¨æ€ã£ãŸã‘ã©hiveã¨ã®é€£æºãŒã¾ã ã¿ãŸã„ãªã®ã¨ã€æ—¢å˜è³‡ç”£ã®æ´»ç”¨ã‚‚ã‚ã£ã¦å¤ã„sqoopã®ã¾ã¾å‡¦ç†ã‚’進ã‚ã¦ã„る。 Hiveã‹ã‚‰selectã—ã¦çµæžœã‚’MySQLã¸insertã™ã‚‹éƒ¨åˆ†ã¯MySQL-Python使ã£ã¦ã„ã¾ã™ã€‚ã“ã®è¾ºã‚‚æ—¢å˜è³‡ç”£ãŒã‚ã‚‹ã‹ã‚‰ã§ã™ã。 Python 3ã¯ä½¿ã£ã¦ã„ãªã„ã®ã§ä¸‹è¨˜ã«ã‚るよã†ãªäº‹æƒ…ã¯ä»Šå›žç‰¹ã«é–¢ä¿‚ãªã„ã§ã™ã€‚ã¨ã¯ã„ãˆPython 3ã‚‚
Hadoopを使ã£ãŸãƒã‚°åˆ†æžã‚·ã‚¹ãƒ†ãƒ ã«ãŠã‘る開発ã€ãƒ‡ãƒ—ãƒã‚¤ã®ãƒ•ãƒãƒ¼ã«ã¤ã„㦠- wyukawa's diary
フォレンジックã§åŽé›†ã—ãŸãƒ‡ãƒ¼ã‚¿ã‚’ファイルã¨ã—ã¦ã‚¢ã‚¯ã‚»ã‚¹ã§ãã‚‹
標準教科書シリーズ ãŠå•ã„åˆã‚ã›çª“å£
{{#tags}}- {{label}}
{{/tags}}