App Engine上で大量のエンティティを処理するパターンをまとめてみました。 Concurrent Pattern 対象のエンティティをシャードに分割し、それぞれを並列に処理するパターンです。シャーディングを行うSplitterとエンティティを処理するMapperが並行して動きます。SplitterとMapperは独立したタスクであるため、memcacheを介してエンティティを受け渡します。 このパターンの利点は、エンティティの処理内容に関係なく一定のスループットを確保できることにあります。Mapperでどんなに長い処理を行ってもSplitterは淡々とシャーディングを続けるため、スループットに影響はありません。 Mapperの処理結果をmemcacheに突っ込み、別のタスクで集約することで、MapReduceのような処理も可能かなと思います。 Serialized Pattern 対

今やってる仕事は、Hibernate2.1なんでアノテーションベースではなく、マッピングファイルが使われているという環境。そして、そのマッピングファイルをいじってスキーマ修飾のSQLを発行できるようにしたいわけだが、使ってないテーブルに対するマッピングファイルが無駄に大量に存在していたり、使ってるマッピングファイルから使ってないマッピングファイルにmany-to-one関連が張られていて、使ってないから修正の必要ないと思っていると勝手に外部結合してて落ちたりと、メンテナンスの重要性を噛み締める今日この頃なんです。 そんで取りあえずいったいどのテーブルが使われてるのかというのはsqlのログを見てやるのですが、Eclipseのコンソールには、Hibernateのログだけが出るわけではなく、またHibernateのログは長ったらしく、おなじSQLも１つの画面遷移で大量に発行されたりするので、テー

エンジニアとして良い仕事をするために必要なこと ソフトウェア業界で日米を往復しながら仕事をしていると、世界中のさまざまなエンジニアに会う。私のように「プログラミングを心底楽しんでいる」人から、「⁠新3K」（⁠きつい・厳しい・帰れない）を身をもって体験している人までさまざまだが、共通して言えることは、エンジニアとしての基礎がしっかりできている人とできていない人では、その生産効率に大きな開きがあり、それが結果的には、会社での労働環境や待遇に、そして結果として自分自身にとっての「仕事の充実度」に、大きな影響を与えているということである。 いつも締め切りに追われている、毎回バグで苦しんでいる、徹夜の連続で体力に限界がきているなど、「⁠仕事がきつい」理由はいろいろとあると思うが、会社や上司の悪口を言う前に、自分自身がプロフェッショナルなエンジニアとしてこの業界で勝負をするうえで必要な最低限の基礎がで

原文： Prerelease SDK 1.4.0 is out! - Google App Engine | Google Groups App Engine SDK 1.4.0 の prerelease 版が出て、搭載される機能について紹介されていました。 一言でいうと「これは熱い!」 レイテンシ改善のため、インスタンスが常時起動できるようになった！ Channel API が使えるようになった！ 個人的には上記の２つが嬉しい。 勢いで原文の Java 版の新機能のとこだけ訳してみました。細かいところは誤訳の可能性もあるので、念のため原文も載せておきます。 常時起動オプションを設定することで、3インスタンスを常時起動しておくことができます。これにより、アプリケーションのレイテンシ（起動時間）を大幅に短縮することができます。(The Always On feature allows app

2020/10/18 エンジニア D4DJ Groovy Mix オープンベータ開始 2020/10/18 ＤＪ 秋葉原(を夢見る)パラダイスレイディオ Vol.1 @ twitch配信 2020/10/25 エンジニア D4DJ Groovy Mix リリース 2020/11/14 ＤＪ UNDER Freaks 2nd anniv. @ 渋谷Cafe W (渋谷WOMB 1F) 一部の携帯ショップでauのandroid端末「IS01」がタダ同然で放出されてます。 月額料金を８円にする技と組み合わせると、総額３０００円程度でandroid端末が持てるので ２ｃｈやtwitter界隈でお祭り騒ぎとなってます。 で、さっそく便乗してIS01を貰ってきましたのでいろいろまとめてみます。 どこで無料IS01をゲットするの？ 全国各地の携帯ショップ、ケーズデンキやコジマ電気で売ってます。 直接足で