連載: IBM Watson Workspace #鬼ã‚㋠アプリケーション開発: 第 7 回: IBM Watson Workspace 㧠AI を利用ã—ãŸã‚¢ãƒ—リ連æºã®å®Ÿç¾ #鬼ã‚㋠解説（å‰ç·¨ï¼‰IBM Developer is your one-stop location for getting hands-on training and learning in-demand skills on relevant technologies such as generative AI, data science, AI, and open source.
Hadoopを使ã„ã“ãªã™(2)
ãƒ¤ãƒ•ãƒ¼æ ªå¼ä¼šç¤¾ã¯ã€2023å¹´10月1æ—¥ã«LINEãƒ¤ãƒ•ãƒ¼æ ªå¼ä¼šç¤¾ã«ãªã‚Šã¾ã—ãŸã€‚LINEãƒ¤ãƒ•ãƒ¼æ ªå¼ä¼šç¤¾ã®æ–°ã—ã„ブãƒã‚°ã¯ã“ã¡ã‚‰ã§ã™ã€‚LINEヤフー Tech Blog ã“ã‚“ã«ã¡ã¯ã€ å‰å›žã®Hadoopã®è¨˜äº‹ ã«å¼•ã続ãã€MapReduceã®ã‚«ã‚¹ã‚¿ãƒžã‚¤ã‚ºãƒã‚¤ãƒ³ãƒˆã‚’解説ã—ã¦ã„ãã¾ã™ã€‚ å‰å›žã®è¨˜äº‹ã®å›³ã‚„ã€è¡¨ãªã©ã‚’å‚ç…§ã—ãªãŒã‚‰èªã¿é€²ã‚ã¦ã„ãŸã ã‘ã‚Œã°ã¨æ€ã„ã¾ã™ã€‚ Mapperã‚„Reducerã®æµã‚Œã®åˆ¶å¾¡ Mapperã®å®Ÿè¡Œã®æµã‚Œã¯ã€ãƒ‡ãƒ•ã‚©ãƒ«ãƒˆã§ã¯ã€åˆæœŸåŒ–処ç†ã‚’è¡Œã£ãŸå¾Œã€map関数を繰り返ã—実行ã—ã€çµ‚了処ç†ã‚’è¡Œã†ã‚ˆã†ã«ãªã£ã¦ã„ã¾ã™ãŒã€ã“ã®æµã‚Œè‡ªä½“を制御ã™ã‚‹ã“ã¨ãŒã§ãã¾ã™ã€‚ å¤ã„APIã§ã¯ã€MapRunnerを通ã˜ã¦ã“ã®æµã‚Œã‚’制御ã§ãã¾ã™ãŒã€0.20.0ã‹ã‚‰ã®æ–°ã—ã„APIã§ã¯å˜ç´”ã«Mapperクラスã®run関数をオーãƒãƒ¼ãƒ©ã‚¤ãƒ‰ã™ã‚‹ã“ã¨ã§ã€è¡Œãˆã¾ã™ã€‚ デフォルトã®run関数ã¯ä»¥ä¸‹ã®é€šã‚Šã§ã™ã€‚ public vo
Hadoopã§ã‚µãƒ³ãƒ—ãƒ«ä½œæˆ - 忘れãŒã¡ãªã‚ãªãŸã¸
$vim .bashrc export JAVA_HOME=/usr/lib/jvm/java-6-openjdk export PATH=$PATH:/usr/local/hadoop/bin $source .bashrc $vim ~/hadoop-0.21.0/conf/hadoop-env.sh export JAVA_HOME=/usr/lib/jvm/java-6-openjdk export HADOOP_PID_DIR=/var/hadoop/pids $sudo mkdir -p /var/hadoop/pids $sudo chmod 777 /var/hadoop/pids
1
ランã‚ング
ãŠçŸ¥ã‚‰ã›
ランã‚ング
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
処ç†ã‚’実行ä¸ã§ã™
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
{{#tags}}- {{label}}
{{/tags}}