Spark Streaming Programming Guide Note Overview A Quick Example Basic Concepts Linking Initializing StreamingContext Discretized Streams (DStreams) Input DStreams and Receivers Transformations on DStreams Output Operations on DStreams DataFrame and SQL Operations MLlib Operations Caching / Persistence Checkpointing Accumulators, Broadcast Variables, and Checkpoints Deploying Applications Monitorin

You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert

日清食品は7月7日、カップヌードルブランド初のそうめん「カップヌードルライトそうめん」を発売する。価格は170円（税別）。 2012年から、「氷を入れて冷やして食べる」という新しい食べ方を提案してきた「カップヌードルライト」シリーズ。今回登場する「カップヌードルライトそうめん」は、そんな夏の食べ方にピッタリのカップヌードルだ。 その特長は、「カップヌードルライト」で培った技術を応用した新開発のそうめん。小麦粉の豊かな香りとしなやかな麺質で、ホット調理の際には湯のびしにくく、アイス調理の際にはしっかりとしたコシのある食感になる。 スープは、鶏をベースにシイタケのだしとアサリ、昆布のうまみを加え、アクセントにショウガを利かせた。さっぱりとしながらもコク深い「和のカップヌードル」だ。

最近、金魚本のJava EE 7版であるBeginning Java EE 7を細かめに読んでいるのですが 先日Twitterでのやりとりで、Java EE 7 Essentialsがおススメされてたので、早速買ってみました(^^) 王子のオススメ来たッ！ヽ(*´∀｀)ノ RT @yoshioterada: 私は、Arun の本がオススメです、元同僚というのは置いておいて内容重視で。今度もし EE 7 で翻訳ができるのであれば、これかな。 http://t.co/92chLeXXyk— いまいまさのぶ (@masanobuimai) 2014, 6月 19 以前のJava EE 6 Pocket Guideと比べると書籍のサイズが大きくなってた(>_<)! ちなみに自分は写真のようにペーパーバックで購入しましたが、価格的には以下のようにKindle版のほうがお得です(^^;; Beginn

原稿を準備してスピーチするような、わりと公式性の高い英語プレゼンのときの練習法です(Mac限定): 原稿をテキストファイルにセーブ。 ターミナル（アプリケーションの中の「ユーティリティ」フォルダに入っています）。を開きます。 say コマンドで、原稿を音声ファイルに変換します： $ say -f script.txt -o script.aiff これで、テキスト原稿script.txtが英語音声ファイル script.aiff に変換されるので、iTunes経由でiPhoneやiPodにコピーします(最後の-o script.aiff を指定しなければ直接スピーカーから音声が出ます)。 あとはひたすら生成されたスピーチファイル聞きながらシャドーイング。ジョギングしながらでも英語についていって淀みなく言えるように練習します。 以上です。macのsayコマンドは、感情的表現こそありませんが、

Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? 先日Macを再インストールするに当って、いい機会なので使ってないツールを省き使っているツールを厳選してインストールすることにした。あまり増やす気はなかったが、使うものだけ入れても73個になった。 コマンドライン ツール管理 brew-cask: HomebrewでMacアプリをインストールできる。 brew-gem: Homebrewでgemツールをインストールできる。 brew-pip: Homebrewでpipツールをインストールできる。 npm: Node.jsのパッケージ管理ツール。 DevOps ansible: Python

DA88 luôn là điểm đến mà bất kỳ cược thủ nào cũng muốn lựa chọn để tận hưởng trải nghiệm tốt nhất. Bạn sẽ có cơ hội tiếp cận nhiều loại hình giải trí hấp dẫn và các dịch vụ tiện ích. Nội dung cập nhật bên dưới đây về địa chỉ sẽ giúp bạn có thêm thông tin trước khi quyết định đăng ký. Cách Thức Liên Hệ Tổng Đài DA88 Cực Nhanh Và Chi TiếtChính Sách Bảo Mật DA88 Đang Áp Dụng Với Mọi Cược ThủChơi game

フロントエンドのパラダイムを参考にバックエンド開発を再考する / TypeScript による GraphQL バックエンド開発

要するにデータセンターの「原価計算」です。いろいろこのあたりに関わっています。複雑な計算ロジックと大量のデータを扱う必要があるので、大規模並列計算の適用が必須になり、結果として当方の出番になった、という状態。尚、実行基盤にHadoop（MapR）を利用しています。（一応予定ではSparkに移行するつもりで、開発も始まっています。） さて、いろいろやっていて思うところがあるので、現時点での考え方をまとめておきます。機微な部分はNDAになるので書きませんし、以下は自分の「個人的な」意見であり、特定のサービサーの話をしているわけではありません。基本的にInteropで公にしゃべった話のまとめです。 ■現状認識 現在、国内DCはほぼ乱立状態に近いと思われます。ここへ来て春先のAWSの値下げのインパクトもありました。今後は、より競争的なマーケットになるでしょう。退場する企業やM&Aも活発化していくで

小学校でプログラミング必修に　使うツールは教師が選び、国はシェアを促進――フィンランドの教育現場の「責任と自由」 フィンランドの教育課程は幼稚園から小中高、大学まですべて無償。日本でも紹介されることが多いように、教育水準の高さは世界的にも有名だ。 経済協力開発機構（OECD）が世界65カ国の15歳を対象に行う国際学力テスト（PISA）の2012年の結果は、数学的リテラシーで12位、読解力で6位、科学的リテラシーで5位となった。相対的に見て悪い結果ではないが、特に理数系に関して「凋落」「低調気味」という論調も見られるという。 教育文化庁のエサ・スオミネン氏は「もちろんPISAの結果を上げることが目的ではないが、動向としては注視している。今の時代に必要な知識やスキルを想定してカリキュラムをアップデートしていきたい」と話す。 フィンランドでは、約10年に1度カリキュラム改正が行われており、201

Spring BootによるAPIバックエンド構築実践ガイド 第2版 何千人もの開発者が、InfoQのミニブック「Practical Guide to Building an API Back End with Spring Boot」から、Spring Bootを使ったREST API構築の基礎を学んだ。この本では、出版時に新しくリリースされたバージョンである Spring Boot 2 を使用している。しかし、Spring Boot3が最近リリースされ、重要な変...

こんにちは。 Apache Spark Streamingに関する論文 「Discretized Streams: A Fault-Tolerant Model for Scalable Stream Processing」 （http://www.eecs.berkeley.edu/Pubs/TechRpts/2012/EECS-2012-259.pdf） について、概念と動作概要が書かれた１章〜５章を読んだので、１投稿にまとめます。 こちらも以前見たスライドの詳細化版なんですが、一部スライド見ているだけだとわからない情報もあり、参考になりました。 ストリーム処理を1秒の間に受信したイベント群に対するバッチ処理の連鎖として バッチ処理の性質を保ったまま実行してしまうというのがSpark Streamingの肝でした。 こうすることで遅延は0.5〜2.0秒程発生してしまうため純粋なストリー

こんにちは。ようやく１ページ全てまとめ終わったので、 最後にまとめ投稿として投稿しておきます。 尚、ページは下記です。 http://kafka.apache.org/07/design.html ＝＝＝＝＝＝＝＝＝＝ 1.何故Kafkaは作られたのか？ 元々はLinkedInのActivity StreamとData Processingをパイプライン式に繋ぐために開発されたプロダクト。 最近はTumblr、DataSiftといった企業でも使用されている。 →　SNSや、複数のサービスの情報を統合するようなシステムで使われているようです。 ここでいうActivity Streamとは Webページで閲覧、検索、リンク設定などを行う活動全般を指す。 これらのデータは通常のシステムならば、ログファイルとして出力し、後で別途解析に用いられる。 もう一つ言葉を定義する。 Operational

こんにちは。 この間購入した「Apache Kafka入門」を読み終わったので、 どんな本かという概要と注意点を書いてみます。 Apache Kafka入門 作者: 伊橋正義,原田勝憲出版社/メーカー: リクルートテクノロジーズ発売日: 2014/04/01メディア: Kindle版この商品を含むブログ (1件) を見る どんな本？／読んでみての感想 一言で言うと、 「内部構造や利用時の実装方法について詳細に書かれたJava開発者向けのKafka入門本」でした。 ＃Kafka自体はScala製ですが、この本はScala使いではなく、Java開発者向けです。 特に、Broker/Producer/Consumerのコンポーネント構造や Kafkaのシェルで起動可能なクラスといった情報はコードを読み解かないとわからないため、貴重な情報だと思います。 Kafkaを利用する場合の各パターンについて

Spring BootによるAPIバックエンド構築実践ガイド 第2版 何千人もの開発者が、InfoQのミニブック「Practical Guide to Building an API Back End with Spring Boot」から、Spring Bootを使ったREST API構築の基礎を学んだ。この本では、出版時に新しくリリースされたバージョンである Spring Boot 2 を使用している。しかし、Spring Boot3が最近リリースされ、重要な変...

現代の企業においては、IT（情報技術）、そしてウェブをどう使っていくかが企業の成長のカギを握っている――。このことに異論がある方はいないだろう。 少し前までは、既存の業務を一部IT化し「わが社はITを活用している」などと生ぬるいことを言っていられる時代だったが、今ではIT、ウェブをベースにビジネスモデルを組み立てていないと勝ち目の無い世界になりつつある。 グーグル、フェイスブック、マイクロソフトなどは言うまでもなく、今やITと全く無縁そうな回転寿司屋でさえ、ビッグデータを活用し廃棄量75％削減を達成している時代である（「スシロー、ビッグデータ分析し寿司流す 廃棄量75％減」：日経新聞電子版1月27日）。 しかし、これだけビジネスの中心にIT、ウェブが入り込んできている現在でさえ、IT、ウェブの中心を担うITエンジニアの仕事について「製造業と同じようなもの」と勘違いしている人が非常に多い。

JavaScript Promiseの本という無料で読める電子書籍を書きました。 タイトルそのままで、JavaScriptのPromiseについて書いた書籍です。 書籍の目的 この書籍を読むことで学べる事として、次の3つを目標にして書きました。 Promiseについて学び、パターンやテストを扱えるようになる事 Promiseの向き不向きについて学び、何でもPromiseで解決するべきではないと知る事 ECMAScript6 Promiseの基本をよく学び、発展した形を自分で形成できるようになる事 Promiseは、次のECMAScriptの言語仕様として策定が進められていて既に多くのブラウザに実装されています。 Promiseについて扱う書籍ですが、この機能はjQuery.Deferred()やAngularJSの$qやBluebird等の類似の機能が既にあるため扱ったことがあるかもしれま

Developing, deploying, and operating cloud applications should be as easy as (if not easier than) local applications. That is and should be a governing principle behind any cloud platform, library, or tool. Spring Cloud--an open-source library--makes it easy to develop JVM applications for the cloud. With it, applications can connect to services and discover information about the cloud environment

PivotalがSpring Cloud 1.0をリリースした。これは、JVMベースのアプリケーションをクラウド向けにシンプルに開発するためのオープンソースのライブラリを提供する。アプリケーションはさまざまなクラウドサービスに接続でき、実行時にクラウド環境の情報を見つけることができる。Springベースのアプリケーションでもそうでないアプリケーションでも利用することができ、Cloud Foundry、Herokuをサポートする。ほかのプラットフォームへサポートを拡張することもできる。 Spring CloudはCloud ConnectorとService Connectorというふたつの概念がある。A Cloud Connectorはクラウドプロバイダが実装するインターフェースで、ライブラリがクラウドプラットフォームにアクセスできるようにする。Spring Cloud 1.0にはClou

著者の倉貫さんより献本御礼。 「納品」をなくせばうまくいく ソフトウェア業界の“常識"を変えるビジネスモデル 作者: 倉貫義人出版社/メーカー: 日本実業出版社発売日: 2014/06/12メディア: 単行本（ソフトカバー）この商品を含むブログ (1件) を見る 納品のない受託開発とは 簡単に言うと「一括請負契約をしないで、お客さんの欲しいシステムを受託開発すること」になります。何故一括請負契約をしないのかということが理解できないと、このモデルで契約する意味を感じられないでしょう。本書の主題の１つに「完成(納品)を前提とした一括請負契約がシステム開発をダメにしている」という問題意識がありますので、そこを重点的に補足したいと思います。 一括請負契約の問題点 作ることが目的になる 一括請負契約では完成責任を果たすことが求められます。その為に要件定義を行い完成となる条件を決めます。そして要件を満

面白いOSSプロジェクトを見つけたので紹介します。コンセプトは手のひらに乗るBot。SiriやGoogle Nowのような対話型のインターフェイスを自分でも作れる面白さがあります。 Botとは 最近、hubotのようなBotが流行っていますが、Botはチャットを通じたメンションなどでコマンドを受け付け、コマンドの種類に応じた処理を実行して結果を返す単純な仕組みで動いています。 hubotに代表されるBotはプロダクトをビルドしたり、画像を探して来たりと簡単なお使いができるため、プロジェクトでもお馴染みの存在となりつつあります。 AndroidをBotにする"robota"プロジェクト 今回みつけたrobotaはhubotとは少し毛色が異なり、Androidシステム上にアプリやServiceとして動作する「手のひらに乗るBot」です。 https://github.com/uPhyca/ro