ZOZOTOWNを支えるリアルタイムデータ連携基盤 - ZOZO TECH BLOG

テクノロジーカテゴリーの変更を依頼記事元:

techblog.zozo.com

108 usersがブックマークコメント

コメント

4

記事へのコメント4件

注目コメント
新着コメント

nilab ZOZOTOWNを支えるリアルタイムデータ連携基盤 - ZOZO Technologies TECH BLOG

2020/11/12 リンク

yujiorama 費用効果がすごい "月間で約200万円ほどかかっていましたが約5万円程度にできました"

web

2020/08/27 リンク

kenzy_n ZOZOTOWNのデータ連携基盤構成

2020/08/27 リンク

sonots Fluentd で SQL Server の「変更の追跡」を行い、リアルタイムに pub/sub に突っ込む術。新入荷、更新のあった商品を素早く検索結果や機械学習を用いた推薦結果に反映するのに使える基盤。

2020/08/27 リンク

注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています

規約違反を報告

アプリのスクリーンショット

いまの話題をアプリでチェック！

バナー広告なし
ミュート機能あり
ダークモード搭載

アプリをダウンロード

関連記事

{{ total_bookmarks_with_user_postfix }}{{ root_title }}

ZOZOTOWNを支えるリアルタイムデータ連携基盤 - ZOZO TECH BLOG

こんにちは、SRE部MA基盤チームの谷口（case-k）です。私達のチームでは、データ連携基盤の開発・運用を... こんにちは、SRE部MA基盤チームの谷口（case-k）です。私達のチームでは、データ連携基盤の開発・運用をしています。データ基盤には大きく分けて2種類あり、日次でデータ連携してるものとリアルタイムにデータ連携しているものがあります。本記事ではリアルタイムデータ連携基盤についてご紹介します。既存のデータ連携基盤の紹介リアルタイムデータ連携基盤の紹介なぜ必要なのか活用事例の紹介データ連携の仕組みと課題リプレイス後のリアルタイムデータ連携基盤 SQL Serverの差分データの取り方を検討アーキテクチャ概要と処理の流れ Fluentdのプラグインを使った差分データの取得 Dataflowでメッセージの重複を排除 Dataflowで動的にBigQueryの各テーブルに出力 Pub/Subのメッセージ管理イベントログ収集基盤個人情報の取り扱いビルド・デプロイ戦略監視データ

ブックマークしたユーザー

syou61622024/06/01
knj29182023/12/29
ashenOne2023/10/22
techtech05212023/09/09
phare2022/06/16
kentaojapi2022/06/07
mapk0y2022/01/04
nitamago_monster2021/11/18
ktykogm2021/02/23
cateching2021/01/21
atsuizo2020/12/23
monoqlock2020/12/21
otento-samasama2020/11/16
nilab2020/11/12
yokawasa2020/09/09
snowout2020/09/01
uniquarn2020/08/30
ytacky2020/08/28

同じサイトの新着

同じサイトの新着をもっと読む

いま人気の記事

いま人気の記事をもっと読む

いま人気の記事 - テクノロジー

いま人気の記事 - テクノロジーをもっと読む

新着記事 - テクノロジー

新着記事 - テクノロジーをもっと読む

設定を変更しましたx