09/14に開催されました記念すべき第1回GlusterFS座談会のつぶやきをまとめました。専門家の方々が集まって活発な議論ができたのでとても有意義な場になったと思います。 ユーザーコミュニティも発足しました。 http://groups.google.com/group/gluster-ja?lnk=srg&hl=ja 第2回も開催予定ですので、引き続き宜しくお願いします。本日のUstream録画はこちらです。 続きを読む

Spring BootによるAPIバックエンド構築実践ガイド 第2版 何千人もの開発者が、InfoQのミニブック「Practical Guide to Building an API Back End with Spring Boot」から、Spring Bootを使ったREST API構築の基礎を学んだ。この本では、出版時に新しくリリースされたバージョンである Spring Boot 2 を使用している。しかし、Spring Boot3が最近リリースされ、重要な変...

こんにちは。Amebaのログ解析基盤を担当しているICHIROです。 今回は構築・運用中のログ解析基盤「Patriot」について書きたいと思います。 Webサービスを運営していると日々大量のログデータやユーザデータが蓄積されます。 今まではPV（ページビュー）やUU（ユニークユーザ）などアクセスログなどから取れる、大枠の指標のみを見ることがほとんどでした。 ページビューに合わせてシステムを増強するなど、システム側としては十分とも言える指標ですが、広告や課金サービスという視点から見ると十分とは言えません。 今まではAmeba内の個々のサービス担当者が必要とする指標を出すためにアプリエンジニアやDBエンジニアに都度依頼をする形でデータを抽出していました。 今後の課金サービスの発展が見込まれ、よりデータ分析の重要性が高まると考えた私は、エンジニアでないサービス担当者（主にプロデューサ）がより簡単

Hadoop＋Hive検証環境を構築してみる：Hive――RDB使いのためのHadoopガイド（前編）（1/3 ページ） Hadoop HiveはHadoop上でSQLライクなクエリ操作が可能なDWH向けのプロダクトです。SQLに近い操作が可能なため、HBaseよりもデータベースに慣れ親しんだみなさんには使い勝手がいいかもしれません。本稿ではこのHiveの使い方とレビューを行っていきます。

前回はGoogleの基盤技術とそれに対応するオープンソースソフトウェアとして、Hadoop & hBaseを紹介しました（図1 参照）。今回はHadoopを1台にインストールし、サンプルプログラムを動かします。次にHDFSとMapReduceのアーキテクチャを解説します。最後にサンプルプログラムのソースコードを解説します。 2. Hadoopの概要 Hadoopは主にYahoo! Inc.のDoug Cutting氏によって開発が進められているオープンソースソフトウェアで、GoogleFileSystemとMapReduceというGoogleの基盤技術のオープンソース実装です。Hadoopという名前は開発者の子供が持っている黄色い象のぬいぐるみの名前に由来しています。HadoopはHDFS（Hadoop Distributed File System）、Hadoop MapReduce F

CodeZine編集部では、現場で活躍するデベロッパーをスターにするためのカンファレンス「Developers Summit」や、エンジニアの生きざまをブーストするためのイベント「Developers Boost」など、さまざまなカンファレンスを企画・運営しています。

Facebookが15日に発表した新しいサービス「Facebook Messages」は、チャットやつぶやき、そして電子メールなど、自分宛のテキストやメッセージをすべて1つのインボックスで管理できると発表されました。 同社が15カ月かけて開発してきたこの新サービスのバックエンドデータベースは、これまで同社が大規模運用してきたMySQLでも、同社が開発したNoSQLデータベースのCassandraでもなく、グーグルのBigTableをモデルとしてオープンソースで開発された分散データベース「HBase」でした。 Facebookのソフトウェアエンジニア、Kannan Muthukkaruppan氏がFacebookにポストした記事「The Underlying Technology of Messages」で、その技術的背景が紹介されています。 MySQLとCassandraが落選した理由 H

Facebookが新しいサービス「Messages」の基盤として、NoSQLデータベースの「HBase」を選択したことを、先日の記事「Facebookが新サービスの基盤にしたのは、MySQLでもCassandraでもなく、HBaseだった」で紹介しました。 HBaseは、Facebookによると次のような特徴を備えていると説明されてます。 負荷に対して非常に高いスケーラビリティと性能を発揮 CassandraよりもシンプルなConsistency Model（一貫性モデル）を備えている 自動ロードバランス、フェイルオーバー、圧縮機能 サーバーごとに数十個のシャードを割り当て可能、などなど このHBaseはどのようなデータベースなのでしょうか？ 情報を集めてみました。 HBase入門のプレゼンテーション 最初に紹介するのは「HBaseエバンジェリスト」Tatsuya Kawano氏のプレゼン

はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28

前回のエントリではMySQL 5.6の新機能についてレビューを行ったが、MySQL User Conferenceに合わせる形でMySQL Clusterの新しい開発版であるバージョン7.2も発表された。一見すると追加された新機能の数は少なくMySQL 5.6ほどのインパクトはないが（というかMySQL 5.6の新機能がありすぎなわけだが）、実は7.2ではMySQL Clusterにとって非常に重要な改善がなされているのだ！ というわけで、今日はMySQL Cluster 7.2の新機能を紹介しよう。 JOINの性能が改善！まず最初に最も重要なことについて述べよう。MySQL Cluster 7.2ではJOINの性能が改善している。非常に大切なことなのでもう一度言おう。MySQL Cluster 7.2ではこれまで最大の弱点であったJOINの性能が改善している！ MySQL Cluster

8月31日から2日間、都内で行われたイベント「Cloud Computing World Tokyo 2011」。そのイベントへの申し込み段階で最初に満員となったのが、国立情報学研究所 佐藤一郎教授のセッション「クラウドコンピューティングの将来動向」でした。 技術的な背景に基づき、ビッグデータ活用に必要な条件とは何か、クラウドのビジネスモデルはどうなるのか、データセンターの進化の方向などについて、具体的な解説が行われています。 この記事では、その講演の内容を紹介しましょう。 （本記事は「国立情報学研究所 佐藤教授が語る「クラウドコンピューティングの将来動向」（ビッグデータ編）」の続きです。 クラウドのサービス開発は日本に向いている 2年前、グーグルのエリック・シュミット氏は、インフラを作る時代はそろそろ終わり、これからサービスの時代だ、と言っています。実際にそうだと思いますし、これからはク

「DeNA におけるMySQL高可用性ソリューションとオープンソース戦略」ってお話を聞いて来たので、覚え書き。 これって、リクルートエージェント さんのセミナーだったんですね。 http://www.r-agent.co.jp/info/rss/event/oracle_ace/ こっちしかみてなかったんで、とっても、不思議でしたよ。人数、少ないなぁって。 MySQL勉強会 - PARTAKE 印象に残った事の感想。。 MHA シングルマスター＋レプリカの状態で、ファイルオーバさせるツールとして、試してみたい。 差分修復の大変さは、想像するだけで... スプリットブレイン防止の為に、マスター停止させるとか運用経験からだなぁ... マスターのお引っ越しツールとしても、有効。 更新を止めるために、ユーザをDROPって、すごい。。 実際のデモを見たのと、DeNAで、試用されているっていうのには、

CentOS 5.5 に、GlusterFS 3.2 を、インストールします。 CentOS は、X64です。 Welcome to the Gluster 3.2.0 Documentation を参考にしました。 CentOS 5.5 にrpmforgeから追加するパッケージ [root@centos1 rpm]# sudo rpm -ivh glusterfs-geo-replication-3.2.0-1.x86_64.rpm エラー: 依存性の欠如: python-ctypes は glusterfs-geo-replication-3.2.0-1.x86_64 に必要とされています rsync >= 3.0.7 は glusterfs-geo-replication-3.2.0-1.x86_64 に必要とされています 上記、rpmは、rpmforgeにあります。 rpmforg

データベースに対する負荷ツール、ベンチマークツールは世の中にたくさんあるのですが、単一テーブルに対する主キー検索しかしないものなど、CPUクロック勝負の比較的単純なものが多くを占めているようです。そこで本日は、もう少し高度なベンチマーク仕様としてのTPC-Cと、MySQL向けの簡易実装であるtpcc-mysqlをご紹介します。 TPC-Cとは卸売業における注文・支払いなどの処理を擬似的に再現した業務モデルで、TPCという業界団体によって策定されたものです。9種類のテーブルに対する5種類のトランザクションがミックスされており、そのうち注文処理のスループットを測定結果として利用します。公式サイトで仕様書(PDF)が公開されています。 テーブル定義は以下のようになっています。ちなみにこのER図はMySQL Workbenchで出力したものです。 warehouse：倉庫です。倉庫表のレコード数は

The document discusses big data and Hadoop concepts. It covers Hadoop operations like put, get, scan, filter, delete as well as join and group by. It also discusses the different types of data access patterns like random write, sequential read, sequential write and random read. The document focuses on big data, Hadoop operations, and data access patterns.Read less

Go deeper into fascinating topics with original video series from TED

今日は、いつもよくしていただいている皆さんに、ちょっとした報告があります。 大和田純は、サイジニア株式会社を退社することになりました！ 入社するまで ぼくが学生であった最後の年の、夏。ぼくは東京に滞在して、当時はほとんど「人がいて、机と椅子と夢があるだけ」くらいのサイジニアのオフィスで、ワーワーと騒いだりしていた。立ち上がったばかりの頃の会社のお手伝いをしていた。年齢がひとまわりくらい上の、創業メンバー6人を相手に「お前らウェブの最先端だのなんだの言っているけれど、ぜんぜんウェブのことを分かってねーじゃねーか」みたいなプレゼンをして、その場にいた、日本語が分からない Martin が、資料にあった「Get Real!」だけを覚えていて、ぼくのことを「狂った若者」だと認識していた。 (そのとき、オフィスのベランダで流しそうめんを楽しみました) さらにさかのぼって、大学の学部生のときの、研究室

This browser is no longer supported. Upgrade to Microsoft Edge to take advantage of the latest features, security updates, and technical support.

※これはをシステムエンジニアのNamikawaさんが優秀賞を受賞した第6回研究課題レポート(2011年3月提出)からの抜粋です。 はじめに 大手パブリッククラウドサービスの1つにAmazon Web Servicesがある。Amazon Web Servicesは、仮想サーバを1時間単位課金の従量制で利用できるAmazon EC2や、高信頼性のオンラインストレージを1GB単位からの従量制課金で利用できるAmazon S3などを中心とした、IaaS(Infrastructure as a Service)の代表格である。 現在も定期的に続々と新しいサービスや機能を発表し、Amazon Web Servicesは日本でも益々注目を集める存在である。本稿では、このAmazon Web Servicesの中でも、特に仮想サーバ部分であるAmazon EC2について、主に性能に関する調査結果を記す。

https://rubygems.org/gems/bracecomp https://bitbucket.org/winebarrel/bracecomp まいどまいどのこまいライブラリのリリースです。 これは何？ bashとかのブレース展開をするライブラリです。 サンプルをみればやりたいことは分かると思います。 require 'bracecomp' p 'server-{a,b}-{07..10}'.expand #=> ["server-a-07", "server-a-08", "server-a-09", "server-a-10", "server-b-07", "server-b-08", "server-b-09", "server-b-10"] p 'zone-{a..c}'.expand #=> ["zone-a", "zone-b", "zone-c"] なんでこん

「感性に頼りすぎないゲーム設計というのを心がけている」「企画・開発はもちろんのこと、分析や事業戦略まで手を出しつつやっていく」など、これまでのゲーム作りの方法論を覆すという制作体制をとっているGREE、彼らはどのようにして数々のトップセールスを誇るプロダクトを作り上げているのでしょうか？ 日本最大のゲーム開発者向けカンファレンス「CEDEC2011」にて、これまでのゲーム機業界での手法との対比を交えながらGREEが「セールスランキングNo.1プロダクトの作り方」というタイトルで、ソーシャルゲームの未来への展望について講演を行いました。 講師は過去にフロントミッションシリーズ、FFシリーズなどを手がけ、今年スクウェア・エニックスを退社してGREEに入社した土田俊郎氏、そしてソーシャルゲーム初期の名作「釣り★スタ」のプロダクトマネージャーを努めた岸田崇志氏の両名です。こちらの濃密な講演の全内容

AI is suddenly everywhere. Do you need to go and get a shiny machine learning degree to remain competitive? John Maeda says not to worry. He’ll show you how to cook delicious dishes into your coding repertoire with his new show - Mr. Maeda’s Cozy AI Kitchen. Open at Microsoft is a weekly show for open-source enthusiasts. It features a diverse group of guests including maintainers, software and Dev

All Microsoft Global Microsoft Security Azure Dynamics 365 Microsoft 365 Microsoft Teams Windows 365 Tech & innovation Microsoft Cloud AI Azure Space Mixed reality Microsoft HoloLens Microsoft Viva Quantum computing Sustainability Industries Education Automotive Financial services Government Healthcare Manufacturing Retail All industries Partners Find a partner Become a partner Partner Network Azu

0.前置き マイクロソフトのイベント：BUILDに参加中です。 参加者にプレゼントされた、サムスン製のスレートPCのレビューをちょっとだけ！ さっそく。 1.外観 サムスン製のスレートPCです。 大きさはiPadより一回り大きい。 こんなスリーブ（袋）も一緒にもらいました。 どこよざで見たことある。 ちなみに性能は以下の通り。 2.メトロUI Windows 8のUIは、Windows Phone 7でも採用されているメトロUIです。 もう少しなじみの深いところでいうと、auのインフォバーっぽいUIです。 スリープから起動直後。 メトロUIはこれ。 タスクマネージャーはこんな感じ。 私の好きな天気アプリは完璧です。（iPadも天気アプリがメイン用途ｗ） ちなみにUIは今までの一般的なwindows UIと切り替え可能です。 3.開発ツール なんとこのスレートには、Visual Studio

You are here: Home » Windows 8 Guides » How To Install Windows 8.1 From USB Flash Drive Now that the final version of the Windows 8/8.1 OS is officially available for download, some of you might be planning to use it as your primary OS. When it comes to installing Windows 7 and Windows 8/8.1, the best way is using a bootable USB stick to quickly install the OS. As most of the motherboards availabl

This series showcases how Microsoft Copilot integrates with various Azure services to assist IT / Ops professionals in their daily hybrid management tasks. The videos will cover topics such as Access Management, Inline YAML Editing, Data Collection and Feedback, and more. Each episodes will provide practical examples and insights into leveraging Copilot for efficient and effective operations manag

クセのある操作！ 快速挙動！ 動画あり！ ──Windows 8速攻レビュー：BUILD（1/4 ページ） Microsoftの開発者カンファレンス「BUILD」が、9月13日から16日までの4日間の日程で米国にて開催される。このイベントでは、Windows 8の概要とともに、アプリケーションやソリューションの開発に必要な情報を開発者へ提供することを目的としている。その詳細な情報に先立って、ここでは、Windows 8が動作するタブレットデバイスを使って、実際の操作や挙動を紹介する。 高速なレスポンスで軽快に動作するWindows 8 PC USERでは、Microsoftが開催したWindows 8のプレビューイベントを2回紹介しているが（こちらとこちら）、いずれも実機を直接触れず、デモストレーションを眺めているだけだった。そのため、今回が初めて実機を使う機会となる。 今回評価するWin

2011年09月13日18:24 ドイツ人「日本人はエリート大学生でも議論ができない。主体性が無い。終わってるわこの国」 Tweet 1：名無しさん＠涙目です。(東京都)：2011/09/13(火) 14:53:36.38 ID:DZbtnupT0 「早稲田大学で勉強してるときには、自分の意見を言う必要がない」と、 カール・シュトゥッベ(Karl Stubbe)さんは語る。 「学生に『じゃあ、あなたの意見を聞かせてください』と尋ねても、日本人は答えに困ってしまう」。 日本へ留学した日本語学科の学生が語る：日本とは、電車に押し込められたり、 大学生がルイ・ヴィトンのカバンを愛用してる国です。 梅雨時の東京はものすごく暑くて蒸しています。 北海道では６ヶ月も雪に囲まれて場所によってはスキーで登校。京都では教師がお坊さん。 何処へ行けば良いのだ・・・？ 学生に人気もあり、大学は大繁盛。受験をする

2011年09月13日21:20 【閲覧注意】ベルギー写真家、日本のヤクザを2年間追跡 Tweet 1：中国住み （美楽加油!） ◆0AyEq578t2 (東京都)：2011/09/13(火) 19:44:53.37 ID:7TAR6dQL0 日本で悪名高い｢ヤクザ｣とともに2年間を過ごしたベルギーの写真家Anton Kustersは、 数カ月にわたる交渉を通じて、歌舞伎町を牛耳るこの伝統的なヤクザ一族の許可を得て、 間近で彼らの日常生活を撮影した。 http://japanese.china.org.cn/jp/txt/2011-09/13/content_23406260_9.htm 3： 名無しさん＠涙目です。(茸)：2011/09/13(火) 19:46:28.38 ID:dZYg8nSS0 なかなかええやん 10： 名無しさん＠涙目です。(dion軍)：2011/09/13(火)

世界中で愛され、日本でも大人気のコーヒーショップ『スターバックス　コーヒー』。 最近では、コンビニでも販売されているチルドカップの『スターバックス　ディスカバリーズ』が好評を博しているが、そのシリーズに13日から新発売のスターバックス日本第1号店で最初にオーダーされた、「ダブル ラテ」が追加、販売開始された。 ダブルラテはスタバの店舗と同じ豆を使用しており、エスプレッソの力強さとミルクのコクが味わえるが実はこの商品、美味しさだけではない「超お得な利用方法」が隠されているのである。 その利用方法は、カップ上部に貼られているシールをめくると判明する。なんと、このシールを実際に店舗へ持っていきドリンクを1杯注文すると、注文したドリンクと同じ物のショートサイズが1杯無料でプレゼントされるのだ！ 詳細な方法について以下に記すので、ぜひ見て試して欲しい。 ■スタバのドリンクを1個買って2個もらう方法