https://hub.docker.com/r/cloudera/quickstart/
象ã®è™«ã‚’è¸ã‚“ã 話 - garbagetown
大人ã®äº‹æƒ…ã§å¤ã„ CDH 5.1.2 ã‚’ç´ ã®è¨å®šã§ä½¿ã†ã¨ Reducer 㧠OOME ãŒå‡ºãŸã‚Šå‡ºãªã‹ã£ãŸã‚Šã™ã‚‹ã€‚ 2016-02-12 00:58:44,134 WARN [main] org.apache.hadoop.mapred.YarnChild: Exception running child : org.apache.hadoop.mapreduce.task.reduce.Shuffle$ShuffleError: error in shuffle in fetcher#1 at org.apache.hadoop.mapreduce.task.reduce.Shuffle.run(Shuffle.java:134) at org.apache.hadoop.mapred.ReduceTask.run(ReduceTask.java:376) at org.apache.h
Cloudera World Tokyo 2016 ã«å‚åŠ ã—ã¦ãã¾ã—ãŸã€‚ - #garagekidztweetz
ã“ã®æ—¥ï¼ˆ2016-11-08）ã¯ä»¥ä¸‹ã®ãƒªãƒ³ã‚¯ã®ã‚¤ãƒ™ãƒ³ãƒˆï¼ˆ Cloudera World Tokyo 2016 ）ã«å‚åŠ ã—ã¦ãã¾ã—ãŸã®ã§ã€ãã®ã“ã¨ã«ã¤ã„ã¦æ›¸ã“ã†ã¨æ€ã„ã¾ã™ã€‚ www.clouderaworldtokyo.com Cloudera World Tokyo 2016 ã®ç·æ‹¬ï¼ˆã¨ã„ã†ã‚ˆã‚Šå€‹äººçš„感想）。 ã¾ãšã¯æ„Ÿæƒ³ã‹ã‚‰ã€‚ ãã‚“ãªã«æŠ€è¡“技術ガッツンガッツンãªã‚»ãƒƒã‚·ãƒ§ãƒ³ã«å½“ãŸã‚‰ãªã‹ã£ãŸï¼ˆãŠãらããã†ã„ã†ã‚»ãƒƒã‚·ãƒ§ãƒ³ã‚‚ã‚ã£ãŸã®ã ã¨ã¯æ€ã„ã¾ã™ãŒï¼‰ã®ã§ã€æœ¬å½“ã«å€‹äººã®æ„Ÿæƒ³çš„ãªã‚‚ã®ã§ã™ã€‚ ã¾ãšã¯ã€æœˆä¸¦ã¿ã§ã¯ã”ã–ã„ã¾ã™ãŒã€ Hadoop生誕10周年ãŠã‚ã§ã¨ã†ã”ã–ã„ã¾ã™ï¼ã¤ã„ã«ã“ã®ãƒ—ãƒãƒ€ã‚¯ãƒˆã‚‚一区切りã¾ã§ãã¾ã—ãŸã。 今回㮠Cloudera World Tokyo 2016 ã¯ã¾ã•ã«Hadoop生誕10周年をç¥ã†å ´ã§ã¨ã—ã¦å¤§æˆåŠŸãªã‚¤ãƒ™ãƒ³ãƒˆã ã£ãŸã®ã§ã¯ãªã„ã§ã—ょã†ã‹ã€‚黎明期㮠Hadoop ã‹ã‚‰ä¸€è²«ã—ã¦
Cloudera Managerã«ã‚ˆã‚‹æ“作ãƒã‚°ã‚’Linuxコマンドレベルã§é–²è¦§ã™ã‚‹ - Qiita
Cloudera Manager Advent Calendar 2015ã®20日目ã§ã™ã€‚ 「Cloudera Manager を使ã†ã¨ä¾¿åˆ©ã ã‘ã©ã€è£ã§ä½•ã‚’ã‚„ã£ã¦ã„ã‚‹ã®ã‹ã‚ˆãã‚ã‹ã‚‰ãªã„ã€ã¨ã„ã†æ„見をèžãã“ã¨ãŒã‚る。 安心ã—ã¦ã»ã—ã„。Cloudera Manager ã¯ã€CDHã«å¯¾ã™ã‚‹ã‚らゆるæ“作をLinuxã®ã‚³ãƒžãƒ³ãƒ‰ãƒ¬ãƒ™ãƒ«ã§è¡¨ç¤ºã™ã‚‹ã“ã¨ãŒã§ãる。 Cloudera Manager 㨠CDH ã¯ç–Žçµåˆã«ãªã£ã¦ã„ã¦ã€CDH自体ã¸ã®æ“作ã¯ã»ã¨ã‚“ã©ãŒã‚·ã‚§ãƒ«ã‚¹ã‚¯ãƒªãƒ—トãªã©ã«ã‚ˆã‚‹ã‚³ãƒžãƒ³ãƒ‰å®Ÿè¡Œã§è¡Œã‚ã‚Œã¦ã„る。 よã£ã¦ã€ãれらã®æ“作を外部ã‹ã‚‰é–²è¦§ã™ã‚‹ã“ã¨ã¯éžå¸¸ã«å®¹æ˜“ã§ã‚ã‚Šã€ã¾ãŸãã®æ“作を手動ã§å†ç¾ã™ã‚‹ã“ã¨ã‚‚å¯èƒ½ã§ã‚ã‚‹(普通ã“ã®ã‚ˆã†ãªã“ã¨ã‚’è¡Œã†å¿…è¦ã¯ãªã„ãŒ)。 環境 Cloudera Manager 5.5 本編 Cloudera Manager ã®ãƒ›ãƒ¼ãƒ ç”»é¢ã« å…¨ã¦ã®æœ€è¿‘ã®ã‚³ãƒžãƒ³ãƒ‰ ã¨ã„ã†ã‚¿ãƒ–ãŒã‚る。ã“
Sparkã®ã‚¨ãƒ³ã‚¿ãƒ¼ãƒ—ライズ対応ãŒã€Œæˆç†Ÿã€â€•â€•ClouderaãŒå®£è¨€
Sparkã®ã‚¨ãƒ³ã‚¿ãƒ¼ãƒ—ライズ対応ãŒã€Œæˆç†Ÿã€â€•â€•ClouderaãŒå®£è¨€ï¼š800ノード超ã®Sparkクラスターをé‹ç”¨ã™ã‚‹ãƒ¦ãƒ¼ã‚¶ãƒ¼ã‚‚ Hadoopディストリビューターもã‚らãŸã‚ã¦Sparkã¸ã®æ³¨åŠ›ã‚’アピール。既ã«800ノード超ã®Sparkクラスターをé‹ç”¨ã™ã‚‹ãƒ¦ãƒ¼ã‚¶ãƒ¼ã‚‚å˜åœ¨ã™ã‚‹ã¨ã„ã†ã€‚ Hadoopディストリビューションをæä¾›ã™ã‚‹ç±³Cloudera（クラウデラ）ã¯2015å¹´11月30日（米国時間）ã€Apache Sparkã¸ã®å¯¾å¿œãŒã€Œæˆç†Ÿã—ãŸã€ã¨ã®ãƒªãƒªãƒ¼ã‚¹ã‚’発表ã—ãŸã€‚2015å¹´11月19æ—¥ã«ç™ºè¡¨ã—ãŸã€ŒCloudera Enterprise 5.5ã€ãŠã‚ˆã³ã€ŒCloudera's Distribution including Apache Hadoop 5.5ã€ã§ã¯Spark SQLã¨Spark MLlibã¸ã®å¯¾å¿œã‚’発表ã—ã¦ã„ãŸãŒã€ä»Šå›žã€ã‚らãŸã‚ã¦Spark対応ã®ã€Œæœ¬æ°—度ã€ã¨Hadoopプラットフォー
Cloudera Manager - Qiita Advent Calendar 2015 - Qiita
Cloudera Manager Advent Calendarã¨ã¯Hadoopクラスタã®ç®¡ç†ãƒ„ールã§ã‚ã‚‹Cloudera Managerã®ä½¿ã„æ–¹ã€ä¾¿åˆ©æ©Ÿèƒ½ãªã©ã‚’共有ã™ã‚‹äº‹ã‚’目的ã¨ã—ãŸAdvent Calendarã§ã™ã€‚
Impalaã®ãƒãƒ¼ãƒ‰ãƒžãƒƒãƒ— 2015年版
本日ã€What’s Next for Impala: More Reliablity, Usability, and Performance at Even Greater Scale ã¨ã„ã†ãƒ–ãƒã‚°ãŒå…¬é–‹ã•ã‚Œã¦ã„ã¾ã—ãŸã€‚ ã“ã®ãƒ–ãƒã‚°ã«ã¯2015〜2016ã«ã‹ã‘ã¦ã®Impalaã®ãƒãƒ¼ãƒ‰ãƒžãƒƒãƒ—ãŒè¨˜ã•ã‚Œã¦ã„ã¾ã™ã€‚ã¨ã¯ã„ãˆã€ç¿»è¨³ã•ã‚Œã‚‹ã‹ã©ã†ã‹ã‚ã‹ã‚‰ãªã„ã®ã§ã€å€‹äººçš„ã«èˆˆå‘³ãŒã‚る部分を抜粋ã—ã¦ã¿ã¾ã—ãŸã€‚æ„訳ã§ã™ã—é–“é•ã„ãŒã‚ã‚‹ã‹ã‚‚ã—ã‚Œãªã„ã®ã§ã€è©³ç´°ã¯åŽŸæ–‡ã‚’確èªã—ã¦ãã ã•ã„。 ã—ã‹ã—ã€æ¥å¹´ã‚‚楽ã—ã¿ãªæ©Ÿèƒ½ãŒç›®ç™½æŠ¼ã—ã§ã™ã。 Impalaã¯ã€é‡‘èžã‚µãƒ¼ãƒ“スã€å°å£²ã‚Šæ¥ã€ãƒ˜ãƒ«ã‚¹ã‚±ã‚¢ã€ã‚²ãƒ¼ãƒ 会社ã€æ”¿åºœã€åºƒå‘Šã€é›»è©±ä¼šç¤¾ãªã©ã®æ¥ç¨®ã«æ¸¡ã£ã¦åºƒã本番環境ã§åˆ©ç”¨ã•ã‚Œã¦ã„ã‚‹ ã„ãã¤ã‹ã®ä¼æ¥ã§ã¯å¤§è¦æ¨¡ã«åˆ©ç”¨ã•ã‚Œã¦ãŠã‚Šã€ã‚る広告会社ã§ã¯1000を超ãˆã‚‹ã‚¨ãƒ³ãƒ‰ãƒ¦ãƒ¼ã‚¶ã®ã‚¦ã‚§ãƒ–ã®ãƒ€ãƒƒã‚·ãƒ¥ãƒœãƒ¼ãƒ‰ã‹ã‚‰ç§’é–“80クエリ以上を実行ã—ã€æ•°ç§’ã§çµæžœã‚’å¾—
地震データを検索ã§ãるよã†ã«ã—ã€çµæžœã‚’地図上ã«è¡¨ç¤ºã™ã‚‹ - Qiita
アメリカ地質調査所ãŒå…¬é–‹ã—ã¦ã„る地震ã®ç™ºç”Ÿãƒ‡ãƒ¼ã‚¿ã‚’検索å¯èƒ½ã«ã—ã€çµæžœã‚’地図上ã«ãƒžãƒƒãƒ”ングã™ã‚‹æ–¹æ³•ã‚’紹介ã™ã‚‹ã€‚ 環境 CDH 5.4.2 Cloudera Manager を使ã£ã¦ã‚¯ãƒ©ã‚¹ã‚¿ã‚’準備ã™ã‚‹ã‹ã€ã‚¯ã‚¤ãƒƒã‚¯ã‚¹ã‚¿ãƒ¼ãƒˆVMを準備ã™ã‚‹ã“ã¨ã€‚VMã®æº–備方法ã«ã¤ã„ã¦ã¯ã“ã¡ã‚‰ã‚’å‚考。 データセット 最近発生ã—ãŸåœ°éœ‡ã®ãƒ‡ãƒ¼ã‚¿ã‚»ãƒƒãƒˆã€‚ アメリカ地質調査所 よりå–å¾—ã™ã‚‹ã€‚ 検索システムã®ã‚¢ãƒ¼ã‚テクãƒãƒ£ データセットã®å–得㨠HBase ã¸ã®ãƒãƒ¼ãƒ‰ HBaseã«TSVデータを投入ã™ã‚‹(ImportTsv)ã®è¨˜äº‹ã‚’å‚照。 Solr ã‹ã‚‰ HBase テーブルã®ã‚¤ãƒ³ãƒ‡ãƒƒã‚¯ã‚¹ä½œæˆ HBaseã®ãƒ‡ãƒ¼ã‚¿ã‹ã‚‰Solrã®æ¤œç´¢ã‚¤ãƒ³ãƒ‡ãƒƒã‚¯ã‚¹ã‚’作æˆã™ã‚‹ã®è¨˜äº‹ã‚’å‚照。 検索çµæžœã‚’地図上ã«è¡¨ç¤ºã™ã‚‹ http://<hueサーãƒã®ãƒŽãƒ¼ãƒ‰>:8888/indexer ã«ã‚¢ã‚¯ã‚»ã‚¹ã—〠earthquake-collection ã‚’é¸æŠžã—
Cloudera 5.4 (CDH 5.4 + Cloudera Manager 5.4) リリース
Cloudera Enterprise 5.4 表記ã®é€šã‚Šã€Cloudera Enterpriseã®æ–°ã—ã„ãƒãƒ¼ã‚¸ãƒ§ãƒ³(5.4)ãŒå…¬é–‹ã•ã‚Œã¦ã„ã¾ã™ã€‚日本語ã®ãƒªãƒªãƒ¼ã‚¹ã¯ã“ã¡ã‚‰ã€‚ リリースブãƒã‚°ï¼ˆè‹±èªžï¼‰ Cloudera 5.4: Built for Production Success　（英語） 今回ã®ãƒªãƒªãƒ¼ã‚¹ã¯ã€Œå“質ã€ã‚»ã‚ュリティã€ãƒ‘フォーマンスã€ä½¿ã„ã‚„ã™ã•ã€ã®æ”¹å–„ã«ãƒ•ã‚©ãƒ¼ã‚«ã‚¹ã—ã¦ã„ã‚‹ã¨ã®ã“ã¨ã§ã™ã€‚ã„ã¤ã‚‚ã®ã‚ˆã†ã«æŠ€è¡“çš„ã«èˆˆå‘³æ·±ã„点をピックアップã—ã¦ã¿ã¾ã™ã€‚ ã‚ãã¾ã§ã‚‚個人的ã«èˆˆå‘³ãŒã‚ã‚‹ã‚‚ã®ã ã‘を抜ã出ã—ã¦ã„ã‚‹ã®ã§ã€è©³ç´°ã¯5.4ã®ãƒªãƒªãƒ¼ã‚¹ãƒŽãƒ¼ãƒˆã¨Impala 2.2ã®ãƒªãƒªãƒ¼ã‚¹ãƒŽãƒ¼ãƒˆã”らんãã ã•ã„。 RHEL6.6/CentOS 6.6ã®ã‚µãƒãƒ¼ãƒˆ 多ãã®è¦æœ›ã«å¿œãˆã¦å¯¾å¿œã•ã‚Œã¾ã—ãŸã€‚多ãã®æ–¹ã«æœ—å ±ã˜ã‚ƒãªã„ã‹ã¨æ€ã„ã¾ã™ã€‚ Hadoop HDFS Hadoop 2.6ã¸ã®ãƒªãƒ™ãƒ¼ã‚¹ データノードã®ãƒ›ãƒƒãƒˆ
Announcing: Cloudera Enterprise 5.3.3 (CDH 5.3.3, Cloudera Manager 5.3.3, and Cloudera Navigator 2.2.3)
Dear CDH, Cloudera Manager, Impala, and Cloudera Navigator users, We are pleased to announce the release of Cloudera Enterprise 5.3.3 (CDH 5.3.3, Cloudera Manager 5.3.3, and Cloudera Navigator 2.2.3). Cloudera Enterprise 5.3.3 This release fixes key bugs and includes the following. CDH Replacing DataNode Disks or Manually changing the Storage IDs of Volumes in a Cluster may result in Data Loss. Fi
2014年版 Hadoopã‚’10分ã§è©¦ã™(1)
Hadoop関連（全部俺） Advent Calendar 2014:7日目 先週ã®ç ”ä¿®ä¸ã«ã€ã€ŒHadoopã‚’ã“ã‚Œã‹ã‚‰è©¦ã—ã¦ã¿ãŸã„ã‘ã©ã€ã©ã“ã‹ã‚‰å§‹ã‚ãŸã‚‰ã„ã„ã§ã—ょã†ã‹ï¼Ÿã€ã¨ã„ã†è³ªå•ãŒã‚ã‚Šã¾ã—ãŸã€‚ 構築ã®å‹‰å¼·ã‚’ã—ãŸã„ã®ã§ã‚ã‚Œã°ã€ä»Šãªã‚‰ãƒ‘ブリッククラウドや仮想化環境を使ãˆã‚‹ã®ã§ã€å®Ÿéš›ã«æ§‹ç¯‰ã—ã¦ã¿ã‚‹ã®ãŒè‰¯ã„ã§ã—ょã†ã€‚パッケージを手作æ¥ã§ã‚¤ãƒ³ã‚¹ãƒˆãƒ¼ãƒ«ã—ã¦ã‚‚良ã„ã§ã™ã—ã€Cloudera Managerを使ãˆã°ç°¡å˜ã§ã™ã€‚ MapReduceã‚„Sparkã®ã‚¸ãƒ§ãƒ–ã®é–‹ç™ºæ–¹æ³•ã‚’å¦ã³ãŸã„ã®ã§ã‚ã‚Œã°ã€ç’°å¢ƒã‚’用æ„ã—ãŸä¸Šã§ã€å…ˆæ—¥ç´¹ä»‹ã—ãŸO’Reillyãªã©ã®æ›¸ç±ã‚’利用ã—ãŸã‚Šã€ã‚ã‚‹ã„ã¯ã‚»ãƒŸãƒŠãƒ¼ã‚„ç ”ä¿®ã‚’å—講ã™ã‚‹ã®ãŒè‰¯ã„ã‹ã‚‚ã—ã‚Œã¾ã›ã‚“。 MapRediuceã‚„Sparkを試ã™ãŸã‚ã®ç°¡å˜ãªæ–¹æ³•ã®ã²ã¨ã¤ã¯ã€ã€ŒHadoop入門：Hadoopã‚’10分ã§ç†è§£ã™ã‚‹ã€ シリーズã§ç´¹ä»‹ã—ãŸCloudera Managerã§ã‚ã‚Šã€Clou
HBase徹底入門ã¯Cloudera Managerユーザーã®å¿…èªæ›¸ - nobusueã®æ—¥è¨˜
仕事ã§OpenTSDBを使ã£ã¦ã„ã‚‹ã“ã¨ã‚‚ã‚ã‚Šã€HBase徹底入門を購入ã—ã¾ã—ãŸã€‚ HBase徹底入門 Hadoopクラスタã«ã‚ˆã‚‹é«˜é€Ÿãƒ‡ãƒ¼ã‚¿ãƒ™ãƒ¼ã‚¹ã®å®Ÿç¾ 作者: æ ªå¼ä¼šç¤¾ã‚µã‚¤ãƒãƒ¼ã‚¨ãƒ¼ã‚¸ã‚§ãƒ³ãƒˆéˆ´æœ¨ä¿Šè£•,梅田永介,柿島大貴出版社/メーカー: 翔泳社発売日: 2015/01/28メディア: 大型本ã“ã®å•†å“ã‚’å«ã‚€ãƒ–ãƒã‚°ã‚’見るã¾ã ã–ã£ã¨ã—ã‹èªã‚“ã§ã„ã¾ã›ã‚“ãŒã€ HBaseã®æ¦‚è¦ï¼ã‚¢ãƒ¼ã‚テクãƒãƒ£ã®è§£èª¬ HBaseã®ã‚¤ãƒ³ã‚¹ãƒˆãƒ¼ãƒ«ã¨ã‚¢ãƒ—リケーション開発 スã‚ーマè¨è¨ˆã®ãƒã‚¤ãƒ³ãƒˆ Cloudera Managerã«ã‚ˆã‚‹ã‚¯ãƒ©ã‚¹ã‚¿ç’°å¢ƒæ§‹ç¯‰ Cloudera Managerã«ã‚ˆã‚‹é‹ç”¨ç›£è¦– トラブルシューティング ãªã©ãªã©ã€HBaseã«é™ã‚‰ãšã€CDH5ベースã§Hadoopクラスタをé‹ç”¨ã—ã¦ã„る人(ã‚‚ã—ãã¯ã“ã‚Œã‹ã‚‰é‹ç”¨ã—よã†ã¨ã—ã¦ã„る人)ã«ã¨ã£ã¦ã¯å¿…èªã®æ›¸ã§ã™ã€‚ å°‘ãªãã¨ã‚‚俺得ã§ã‚ã‚‹ã“ã¨ã¯é–“é•ã„ã‚ã‚Šã¾ã›ã‚“。 今ã¾ã§ãªã‚“ã¨ãª
ClouderaãŒã€ŒSQL-on-Hadoopã€ã®Impala 1.0æ£å¼ç‰ˆãƒªãƒªãƒ¼ã‚¹
Hadoopã®ãƒ‡ã‚£ã‚¹ãƒˆãƒªãƒ“ューションベンダã¨ã—ã¦çŸ¥ã‚‰ã‚Œã‚‹Clouderaã¯ä»Šæ—¥ã€Hadoopã®ã‚¯ãƒ©ã‚¹ã‚¿ã«å¯¾ã—ã¦SQLã§ã®å•ã„åˆã‚ã›ã‚’実ç¾ã™ã‚‹ã‚ªãƒ¼ãƒ—ンソースソフトウェア「Cloudera Impalaã€ã®ãƒãƒ¼ã‚¸ãƒ§ãƒ³1.0を公開ã—ã¾ã—ãŸã€‚製å“版ã¯ã€ŒCloudera Enterprise RTQã€ã¨ã—ã¦è²©å£²ã•ã‚Œã¾ã™ã€‚ Release - Cloudera Ships Impala 1.0: Industry's First Production-Ready SQL-on-Hadoop Solution Clouderaã¯ã€Hadoopã§æ§‹ç¯‰ã•ã‚ŒãŸå¤§è¦æ¨¡ãªåˆ†æ•£ãƒ‡ãƒ¼ã‚¿ãƒ™ãƒ¼ã‚¹ã«å¯¾ã—ã¦SQLã§é«˜é€Ÿã«å•ã„åˆã‚ã›ãŒå¯èƒ½ã«ãªã‚‹ã“ã¨ã«ã‚ˆã‚Šã€ä¼æ¥ã§ã®ãƒ‡ãƒ¼ã‚¿ã‚¦ã‚§ã‚¢ãƒã‚¦ã‚¹ç”¨é€”ãªã©Hadoopã§ã®æ–°ãŸãªå¸‚å ´ã‚’é–‹æ‹“ã§ãã‚‹ã¨ã—ã¦ã„ã¾ã™ã€‚ MapReduceを使ã‚ãšç‹¬è‡ªã®åˆ†æ•£ã‚¯ã‚¨ãƒªã‚¨ãƒ³ã‚¸ãƒ³ Impalaã¯ãƒãƒƒãƒå‡¦ç†ã‚’ベースã«
1
ランã‚ング
ランã‚ング
ランã‚ング
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
https://jp.techcrunch.com/2017/04/03/cloudera-posts-long-awaited-ipo-filing/
[IMPALA-110] Add support for multiple distinct operators in the same query block - ASF JIRA
Deploying Cloudera 5 on Red Hat Enterprise Linux 6
{{#tags}}- {{label}}
{{/tags}}