分散ã‚ューã¨ã„ã†åã®è‹¦ã—ã¿ - Software Transactional MemoTL;DR 分散システムã«ãŠã„ã¦ã‚ューを導入ã™ã‚‹å ´åˆã€æœ¬å½“ã«ã‚ューãŒå¿…è¦ãªã®ã‹å†è€ƒã™ã¹ã。ãã“ãŒåœ°ç„ã®å…¥ã‚Šå£ã ã‹ã‚‰ã€‚ システムã®æŠ½è±¡ コンピュータã®ä¸–ç•Œã¯ã€æœ¬æ¥ã¯0ã¨1ã®ä¿¡å·ã®ç¾…列ãŒé£›ã³äº¤ã†ç„¡æ©Ÿè³ªãªã‚‚ã®ã§ã‚る。ã§ã‚‚人類ã¯ä¿¡å·ã ã‘ã§ã™ã¹ã¦ã‚’語らãšã€æ§˜ã€…ãªå–©ãˆã‚’定義ã—ã¦ããŸã€‚ãã‚Œã¯ãƒ‡ã‚¹ã‚¯ãƒˆãƒƒãƒ—・ウィンドウ・マウスカーソルã¨ã„ã£ãŸã‚°ãƒ©ãƒ•ã‚£ã‚«ãƒ«ãªè¡¨ç¾ã«ç•™ã¾ã‚‰ãšã€ãƒ‘ケットやカプセル化ã¨ã„ã£ãŸç”¨èªžã«ãƒãƒƒã‚¯ãƒ»ã‚ュー・リスト・木ãªã©ã®ã‚¢ãƒ«ã‚´ãƒªã‚ºãƒ ã‚„ãƒ‡ãƒ¼ã‚¿æ§‹é€ ã®ä¸–ç•Œã«ã‚‚自然ã«æº¶ã‘込んã§ã„る。ã“れらã¯ã™ã¹ã¦äººé–“ã®ç†è§£ã‚’助ã‘ã‚‹ãŸã‚ã®å–©ãˆè©±ã«éŽãŽãšã€ã“ã®å–©ãˆã“ããŒäººé–“ã®ã‚ˆã‚Šç›´æ„Ÿçš„ãªç†è§£ã‚’ã‚‚ãŸã‚‰ã™ä¸€æ–¹ã§ã€ç™ºæƒ³ã®åˆ¶ç´„を生ã¿å‡ºã—ã¦ããŸã€‚ 人間ãŒå¤§ããªã‚·ã‚¹ãƒ†ãƒ を作るã¨ãも何らã‹ã®å–©ãˆã‚’用ã„ã¦ã‚·ã‚¹ãƒ†ãƒ 全体を整ç†ã™ã‚‹ã€‚アーã‚テクãƒãƒ£ã®ã€Œãƒãƒ³ãƒçµµã€ã‚’æã„ã¦æƒ…å ±å…±æœ‰ã‚’ã™ã‚‹ã®ã¯ä¼æ¥ã«å‹¤ã‚ã¦ã„ã‚Œã°çµŒé¨“ã—ãŸäººã‚‚多ã„ã ã‚ã†ã€‚パワーãƒã‚¤ãƒ³
LINEã®å¤§è¦æ¨¡ãƒ‡ãƒ¼ã‚¿ãƒ‘イプラインを支ãˆã‚‹ã€Apache Kafkaプラットフォームã®é‹ç”¨ã®è£å´ - ãƒã‚°ãƒŸãƒ¼Tech
大è¦æ¨¡ãƒ‡ãƒ¼ã‚¿æ´»ç”¨å‘ã‘ストレージレイヤソフトã®ã“ã‚Œã¾ã§ã¨ã“ã‚Œã‹ã‚‰ï¼ˆNTTデータ テクノãƒã‚¸ãƒ¼ã‚«ãƒ³ãƒ•ã‚¡ãƒ¬ãƒ³ã‚¹ 2019 講演資料ã€2019/09/05）
è¿‘å¹´ã®ãƒ‡ãƒ¼ã‚¿åˆ†æžåŸºç›¤æ§‹ç¯‰ã«ãŠã‘る失敗ã¯BigQueryを採用ã—ãªã‹ã£ãŸã“ã¨ã«å…¨ã¦èµ·å› ã—ã¦ã„ã‚‹ - データエンジニアã®é…©é…Šæ—¥è¨˜
The Connect API in Kafka Cassandra Sink: The Perfect Match | Confluent
https://docs.confluent.io/current/streams-ksql.html
ヤフーã®ãƒ‡ãƒ¼ã‚¿ãƒ‘イプラインè¨è¨ˆ 〜 Kafkaã§ãƒ‡ãƒ¼ã‚¿æ¬ æ防æ¢ã¨å¯ç”¨æ€§ã‚’両立ã™ã‚‹ãŸã‚ã«
Apache Kudu - Fast Analytics on Fast Data
GitHub - linkedin/brooklin: An extensible distributed system for reliable nearline data streaming at scale
Open sourcing Brooklin: Near real-time data streaming at scale
How LinkedIn customizes Apache Kafka for 7 trillion messages per day
(翻訳) データエンジニアリングã®æœªæ¥ - satoshihirose.log
{{#tags}}- {{label}}
{{/tags}}