はじめに Amazon EKSを初期導入すると、最小限の構成でクラスターがセットアップされそのままの構成で本番運用をするのはとてもじゃないが厳しいみたいな状態になっています。 これには運用者が柔軟にミドルウェアを選定できるというメリットもありますが、そもそもどんな選択肢があるんだっけみたいなところまではちゃんと整理できていないと思うので、ここでは僕が考える入れておくべきアドオンについて今後のために整理しておきます。 github.com/aws/eks-charts を眺める とりあえず脳死でこのサイトに行き、自分に必要そうなものを眺めることにします。Helmを使ってインストールするかどうかはさておき、それぞれのツールの必要性について検討しようという話です。 github.com App Mesh関連 App Meshを使ったサービスメッシュをやっていきたいのであればこの辺のコンポーネント

Dataform とは 先日Google Cloud のブログでDataformが Google Cloud に買収されたとの記事が公開されました。 Dataform をかんたんに説明すると、ELT（Extract/Load/Transform）のうちの Transform を SQLX で記述し、テーブル定義やデータ変換のドキュメント化・依存関係の管理による DAG の自動生成・テストなどができるツールです。 現在以下の DWH をサポートしています。 BigQuery Snowflake Redshift Postgres Azure SQL data warehouse Presto (under development) GUI・CLI・REST API(beta)での機能が提供されており、基本的には無料（ただし DWH のプロジェクト側の利用料で課金）で利用できます。 Googl

個人的な理由でデータ分析する必要がありいろいろと試行錯誤した記録です。 ほんとうはもっとスマートな方法があるかもしれませんので参考程度に。 たとえば以下のデータがあったとします。 動物と動物に与えた食物を「開始日付」と「終了日付」で期間管理をしています。 飼育表A | 動物 | 開始日付 | 終了日付 | 食物 | |:-:|:-:|:-:|:-:|:-:| | | 2018/01/01 | 2018/01/15 | | | | 2018/01/16 | 2018/03/31 | | | | 2018/01/01 | 2018/03/31 | | 諸々の理由により、猫については同じ食物なのに複数の期間に分かれて登録されてしまいました。実際のデータはめっっっっっっっっっっっっちゃ細かい期間にわかれています( ;∀;) 動物と食物の関係がいつ開始でいつ終了なのかすぐにわかりたい。 ということで

グーグル・クラウド・ジャパン（Google Cloud）は2021年6月2日、Google Cloudの“データクラウド”戦略および最新のデータ関連サービスに関する記者説明会を開催した。先月発表された3つの新サービス、多様なデータソースを統合分析可能にするデータファブリック「Dataplex」、スケーラブルなリアルタイムデータ複製を可能にする「Datastream」、データのみならずデータ分析の“手法”までを組織間で共有できる「Analytics Hub」が紹介された。 Google Cloudがデータクラウドとして重視している4つのポイント 説明会に出席したGoogle Cloud 技術部長（アナリティクス／機械学習、データベース）の寶野雄太氏はまず、企業におけるDX（デジタルトランスフォーメーション）の取り組みにおいて必須となるデータ活用について、「その実現のためには3つの要素が不可欠

はじめに プロダクトマネジメントクライテリアの紹介 採点してみた 採点結果 チーム内への展開 終わりに はじめに こんにちは、データエンジニア内田です。 最近健康の為にUber Eatsを始めました🚵🏼‍♀️ ロングピックでも僕は嬉しいっすよ💪❗️ プロダクトマネジメントクライテリアの紹介 さて、先日PM界隈で著名な及川卓也さん、曽根原春樹さん、小城久美子さんによって作成された プロダクトマネジメントクライテリアが公開されました。 書籍『プロダクトマネジメントのすべて』を元にしたチェックリストをつくりました📝 プロダクトマネージャー個人ではなく、チームとしてプロダクトマネジメントできているかを確認できます。 めちゃくちゃ頑張ったので、ぜひご確認＆フィードバックをお願いします💪https://t.co/ZbvDxNvVvH— 小城 久美子 / koshiro kumiko (@oz

👻 ぷぇ 🍾🍾🍾 メリークリスマス！！！ 🎉🎉🎉 今年も残り僅かですが、皆様の今年の進捗はどうだったでしょうか？　進捗ダメでしたか？ 私はと言うと今年も幸い GitHub で evergreen を達成できそうです。( 業務でこの GitHub アカウントは使用していないので、個人での Contributions のみです。 ) Visual Studio Code Advent Calendar 2019 の最後の記事ともなりますし、普段、特に Qiita ではあんまり記事を書かないのもあるので、 VS Code に関するいろいろなネタの詰め合わせをお送りします。 自分的に VS Code の二大拡張 ※ステマ注意 VS Code Tips 来年(2020年)の VS Code 余談: アイコン騒動、再び！！ 自分的に VS Code の二大拡張 ※ステマ注意 「もしも V

DevOps、バリューストリームマッピング、カスタマージャーニーマップ、エクスペリエンスマップ、ユーザーストーリーマッピング、カンバン、フロー効率性、顧客ファクトリー…。これらの新製品開発のプラクティスを見ていると、これらに共通するのは「流れ」に着目することなのかなと感じています。 たとえば、リーンキャンバスの提唱で有名な Ash Mauyra は『リーンスタートアップ成長戦略』で顧客ファクトリーの概念を提示し、トラクションの流れの作り方を TOC の考え方をベースにしながら語っています。 作業やビジネスの流れに注目することで、「どこに淀みがあるのだろう」という発想に自然となったり、Maurya がやっているように TOC やリーン生産方式の考え方を応用できるというメリットがあります。 この記事は、冒頭に挙げたプラクティスを一段抽象化して、スタートアップでも『流れ化』の考え方を様々な領域で

ロシア政府は現地時間12月23日、同国を世界のインターネットから切り離すための一連の試験に成功し、試験を完了したと発表した。 この試験は先週始まり、数日間かけて実施された。ロシアの政府機関、同国のインターネットサービスプロバイダー、そして同国のインターネット企業が、これに参加した。 その目的は、同国の国内インターネットインフラ（ロシア国内では「RuNet」として知られている）が、グローバルなDNSシステムや外部インターネットにアクセスすることなく機能できるかを確認することだった。 インターネットトラフィックは国内で再ルーティングされた。これにより、ロシアのRuNetは、実質的に世界最大のイントラネットとなる。 ロシア政府は、この試験の技術的詳細や具体的な構成については何も明らかにしなかった。ただ、他国からの悪意あるサイバー攻撃をシミュレーションするシナリオなど、複数の切断シナリオを試験した

Adways Advent Calendar 2019 15日目の記事です。 http://blog.engineer.adways.net/entry/advent_calendar_2019 こんにちは、データエンジニアの内田です。 先日、日本CTO協会がDXCriteriaを公開されましたね。 この資料が改善を推進するに当たって最高のドキュメントだったのでその活用事例をお話したいと思います。 あらまし 内田「ミッションていうのはね、抽象度を高く設定するものなんですよ。オブジェクト指向だってそうでしょう？」 上司「？？？？？？！？？！？？！？？！？」 今思えば何を言っているのか自分でも判りませんね。 意図としては、日々遂行する業務はROIの高い、利益との関連性が 見えやすい業務を優先しがちです。いわゆる重要かつ緊急のタスクですね。 出典:https://diamond.jp/artic

2017年08月30日 株式会社バンダイナムコエンターテインメントとの共同開発タイトル 『アイドルマスター SideM　 LIVE ON ST@GE！』配信開始 株式会社アカツキ（本社：東京都品川区、代表取締役CEO：塩田元規、以下「アカツキ」）は、株式会社アカツキが開発し、株式会社バンダイナムコエンターテインメント（本社：東京都港区、代表取締役社長：大下聡）が提供する『アイドルマスター SideM　 LIVE ON ST@GE！』（配信元：株式会社バンダイナムコエンターテインメント）の配信を本日より開始したことをお知らせいたします。 ■ゲーム内容について 本作は「アイドルマスター SideM」の新作スマートフォン向けゲームアプリになります。プレイヤーはプロデューサーとなって、個性豊かな経歴を持つ、アイドルの卵たちを次々スカウトし、トップアイドルへと成長させていきます。

この記事はCrowdWorks Advent Calendar 2016 の24日目の記事です。CrowdWorksのエンジニアが毎日なにかを書きます。 昨日の記事は @suzan2go による「ラーメン屋で考えるRailsのデータモデリング」でした。 はじめに CrowdWorksは、2011年の創業以来、約5年間の開発を続けてきました。サービスの立ち上げ期においては、サービスの継続性・変更容易性を高めることよりも、サービスを成長させ、存続に繋がるフェースまで素早く立ち上げることが最重要な観点です。 一方で、サービス提供も5年が経過し、多くの方にご利用頂く「社会インフラ」に一歩ずつ近づいてきています。そういった環境の変化もあり、「日々改善し続ける」「日々変更し続ける」ことに重要視する観点が移り変わってきました。そのような価値観の変遷に取り組む過程で考えている「大規模で複雑な業務要件を担う

Adways Advent Calendar 5日目の記事です。 http://blog.engineer.adways.net/entry/advent_calendar/archive どうも、大曲です。 とあるサービスのエンジニアをしています。 ちょうど１年の締めくくりとして、マネジメントの話を書こうかなと思います。 1年前にチームが崩壊した 1年前のこの時期に、立ち上げ時期からサービスを引っ張っていたエンジニアが退職することになりました。 退職したから、チームが崩壊したというよりすでに崩壊していた状態でした。 なぜ、崩壊していた状態なのか？ ４歩進んで３歩下がる開発だった 4週間で大きな機能をリリースする。 3週間でその機能のバグ修正をする。 こんな状況が多発してました。 4週間でリリースするのは良いと思いますが 3週間ずっとリリースした機能のバグ修正をするという 品質担保の下手さ

10月26日（金）、マイクロソフトから「Windows 8」が発売されました。これまでのWindowsから大きく変化したWindows 8は、タッチに最適化された新しいユーザーインターフェース（UI）が話題を呼んでいます。はてなはWindowsストアアプリ「はてなブックマーク」を同日にリリース。新OSとアプリについて、はてなのエンジニア＆デザイナーと、日本マイクロソフト UXエバンジェリストの春日井良隆さんが対談しました。記事の終わりには、Windows 8 搭載PCのプレゼントのお知らせも！ （※この記事は日本マイクロソフト株式会社によるPR記事です） ▽ Experience the Power of Windows 11 OS, Computers, & Apps | Microsoft ▽ Microsoft Apps ――本日は、はてなエンジニアのid:nobuokaさん、はてな

※記事内のURLを新しいタブで開きたい場合は、Ctrlキーを押しながらURLをクリック（Macの場合はCommandキー）してください Tweet 初期たった4人で開発していたカカオトークは、今や韓国人口の半分が使う大物SNSになりました。 大学で生まれたFacebookは、今や全世界9億人に愛されるSNSになっています。 特に莫大な資金がなくてもアイディアとスキルだけで世界で通用するサービスができあがることが多くのサービスによって証明されています。 一発逆転を狙って新しいサービスの開発に挑戦する開発者はたくさんいらっしゃると思います。 何もない状態でひらめくアイデアもあれば、既存のサービスを使ったり調べる中でヒントを得ることもありますよね。 隣国、韓国は日本と社会構造も人々の感覚も似ているところが多々ありますので、韓国の事例をぜひ参考にしてみてください。 ※格サービスの名前の横に書いてあ

iOSアプリ開発で自分がよく使うツールとサービスについてまとめてみました。 BaaS: Parse.com ソーシャルな機能は持たせたいけどサーバ作るのだるい、そんなアプリ開発者の味方がBaaS(Backend as a Service)です。最近熱いですね。Kinvey, StackMobなども試してみましたが、機能的にも料金的にも一番おすすめなのがParse.comです。100万APIまで無料、100万〜1500万APIまで$199という価格設定です。サーバは書くのが嫌というよりデプロイがめんどいくさいんですよね。BaaSなら一瞬でアクティブになりますので捗ります。 リファレンス: Dash 高速にリファレンスを検索したい時、Dashが使えます。 iOS以外にもjQuery,Android,Rails等ひと通り揃っています。 リポジトリ: github リポジトリは何でも言いっちゃ何で

1. RESTful Web アプリの 設計レビューの話 和田 卓人 (a.k.a id:t-wada or @t_wada) July 23, 2012 @ sendagaya.rb 3. 自己紹介 名前: 和田 卓人 (わだ たくと) ブログ: http://d.hatena.ne.jp/t-wada メール: takuto.wada@gmail.com Twitter: http://twitter.com/t_wada タワーズ･クエスト株式会社 取締役社長 4. 私と REST (input) • WEB+DB PRESS vol.32「REST アーキテクチャスタイル入門」 • はてぶ設計議論 • DHH の RubyKaigi 2006 Keynote • WEB+DB PRESS vol.38∼「REST レシピ」 • 『RESTful Web Service』

“加藤公一レオ”の「広告業界的ぶっちゃけ話」 通販王国と言われる九州で、一貫してダイレクトマーケティング型ネット広告に従事し、ネット広告の第一人者と言われる株式会社売れるネット広告社の加藤公一レオ氏の広告業界的“辛口コラム” 「一般の広告マン」から脱して「売れる広告マン」になるには？ 私は大学卒業後、三菱商事株式会社に入社して、商社マンとして社会人をスタートして、「もっと華やかな仕事がしたい」というミーハーで不純な動機で25歳の時に広告業界（広告代理店）に入った。最初の配属は営業局だった。 そこから、20代は死ぬほど働いた。毎晩朝の3～4時ぐらいまで働いて、タクシーで家に帰り、また朝出社する生活の連続だった。 まだ未熟者の若手だったので、 “王道の広告マン（営業）”をやっていた。 上司からは「売上を上げろ！」と言われいつも怒鳴られ、 スタッフからは「仕切りが悪いよ営業さん！」といつもいじめ