pixivã®ãƒ‡ãƒ¼ã‚¿ã‚¹ãƒˆã‚¢/ã‚ャッシュ戦略 ãã®1 - pixiv engineering blog
Zoff PCã®ã‚«ãƒ©ãƒ¼ã‚¿ã‚¤ãƒ—眼é¡ã‚’愛用ã—ã¦ã„るインフラ兼ソフトウェアエンジニアã®bokkoã§ã™ã€‚ å¤ä¼‘ã¿ã¯å±±ç™»ã‚Š -> 温泉ã§æ‚ 々自é©ã«éŽã”ã—ã¦ã¾ã—ãŸãŒã€ä¼‘ã¿æ˜Žã‘ã‹ã‚‰ç‹è‚‰ç—›ã§ä½“ã®ã‚ã¡ã“ã¡ãŒç—›ã„ã§ã™(><)。 今回ã¯pixivã§æ´»ç”¨ã—ã¦ã„るデータストアやãã®å‘¨è¾ºãƒŸãƒ‰ãƒ«ã‚¦ã‚§ã‚¢ã®è©±ã‚’3回ãらã„ã«åˆ†ã‘ã¦ã—よã†ã¨æ€ã„ã¾ã™ã€‚ pixivを支ãˆã‚‹ãƒ‡ãƒ¼ã‚¿ã‚¹ãƒˆã‚¢ pixivã§ã¯ä¸»ã«ä»¥ä¸‹ã®2ã¤ã‚’データストアã¨ã—ã¦æ´»ç”¨ã—ã¦ã„ã¾ã™ã€‚ MySQL KyotoTycoon MySQL pixivã§ã¯ãƒ¦ãƒ¼ã‚¶ã‚„イラストã€ãƒ–ックマークã€ã‚ã‚‹ã„ã¯ãれらã«é–¢é€£ã—ãŸæƒ…å ±ã¨ã„ã£ãŸã‚µãƒ¼ãƒ“スã®æ ¹å¹¹ã«é–¢ã‚るデータã¯MySQLã«ä¿å˜ã—ã¦ã„ã¾ã™ã€‚ ã“ã‚Œã¯MySQLã®é«˜ã„ä¿¡é ¼æ€§ã®ã»ã‹ã«ã€ãƒ”クシブ社内ã§MySQLã®é‹ç”¨ã«é–¢ã™ã‚‹ãƒŽã‚¦ãƒã‚¦ãŒè“„ç©ã•ã‚Œã¦ã„ãŸã‚Šã€è‡ªä½œã®é‹ç”¨ãƒ„ール群ãŒå……実ã—ã¦ã„ã‚‹ã¨ã„ã†ã®ãŒå¤§ããªç†ç”±ã§ã™ã€‚ KyotoTycoon Kyot
ジョインãŒ70å€é«˜é€Ÿã§ã€Memcached APIæ載ã®ã€ŒMySQL Cluster 7.2ã€æ£å¼ç‰ˆãŒç™»å ´
米オラクルã¯ã€ã‚ªãƒ¼ãƒ—ンソースã®ãƒ‡ãƒ¼ã‚¿ãƒ™ãƒ¼ã‚¹ã¨ã—ã¦æ™®åŠã—ã¦ã„ã‚‹MySQLをクラスタ化ã—ã¦åˆ©ç”¨ã™ã‚‹ãŸã‚ã®ã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢ã€ŒMySQL Cluster 7.2ã€ã®æ£å¼ç‰ˆã‚’公開ã—ã¾ã—ãŸã€‚ GPLã«æº–æ‹ ã—ãŸã‚ªãƒ¼ãƒ—ンソース版ã¨åŒæ™‚ã«ã€ç®¡ç†ãƒ„ールをåŒæ¢±ã—ã€24時間365æ—¥ã®ã‚µãƒãƒ¼ãƒˆã‚‚è¡Œã†å•†ç”¨ç‰ˆã®ã€ŒMySQL Cluster Carrier Grade Editionã€ã‚‚åŒæ™‚ã«å…¬é–‹ã—ã¦ã„ã¾ã™ã€‚ ジョインãŒ70å€é«˜é€Ÿã« MySQL Cluster 7.2ã®æœ€å¤§ã®ãƒã‚¤ãƒ³ãƒˆã¯ã€ã‚¸ãƒ§ã‚¤ãƒ³ãŒé«˜é€Ÿã«ãªã£ãŸã“ã¨ã§ã™ã€‚ã“ã‚Œã¾ã§ã‚¯ãƒ©ã‚¹ã‚¿ã§ã®ã‚¸ãƒ§ã‚¤ãƒ³ã¯ã€ã‚¸ãƒ§ã‚¤ãƒ³ã™ã‚‹ãƒ†ãƒ¼ãƒ–ルã®ãƒ‡ãƒ¼ã‚¿ãŒã‚¯ãƒ©ã‚¹ã‚¿å†…ã®ãƒŽãƒ¼ãƒ‰é–“ã‚’ã„ã¡ã„ã¡é£›ã³äº¤ã£ã¦ã„ãŸãŸã‚ã€è¤‡é›‘ãªã‚¸ãƒ§ã‚¤ãƒ³ã«ãªã‚‹ã»ã©é…ã„ã‚‚ã®ã«ãªã£ã¦ã„ã¾ã—ãŸã€‚ MySQL Cluster 7.2ã§æŽ¡ç”¨ã•ã‚ŒãŸAdaptive Query Localization（ã‚ã‚‹ã„ã¯Push Down Joins）ã¨å‘¼ã°
memcached 1.4ã®åˆ°æ¥ 記事一覧 | gihyo.jp
é‹å–¶å…ƒã®ãƒã‚´ Copyright © 2007-2024 All Rights Reserved by Gijutsu-Hyoron Co., Ltd. ページ内容ã®å…¨éƒ¨ã‚ã‚‹ã„ã¯ä¸€éƒ¨ã‚’ç„¡æ–ã§åˆ©ç”¨ã™ã‚‹ã“ã¨ã‚’ç¦æ¢ã—ã¾ã™â 。個別ã«ãƒ©ã‚¤ã‚»ãƒ³ã‚¹ãŒè¨å®šã•ã‚Œã¦ã„る記事ç‰ã¯ãã®ãƒ©ã‚¤ã‚»ãƒ³ã‚¹ã«å¾“ã„ã¾ã™ã€‚
[ソーシャルアプリ] LAMP ã§ä½œã‚‹ã‚½ãƒ¼ã‚·ãƒ£ãƒ«ã‚¢ãƒ—リã®è² è·å¯¾ç–〜アプリã¨ã‚¤ãƒ³ãƒ•ãƒ©ã®èª¿å’Œã®ãƒ†ã‚¯ãƒ‹ãƒƒã‚¯ã€œ - ore*flow
本当ã¯å‡ºå¸ã™ã‚‹äºˆå®šã ã£ãŸã®ã§ã™ãŒã€ä»•äº‹ã®éƒ½åˆã«ã‚ˆã‚Šç¾åœ°ã«ã¯è¡Œã‘ãšã€‚Ustreamã§ã®è¦–è´ã¨ãªã‚Šã¾ã—ãŸã€‚http://www.ustream.tv/channel/social-application-seminarã›ã£ã‹ããªã®ã§ã€å†…容ã®ã¾ã¨ã‚。脚注ã¯ã€ãƒ¡ãƒ¢ã—ã¦ãŠã„ãŸè‡ªåˆ†ã®ã‚³ãƒ¡ãƒ³ãƒˆã‚’残ã—ã¦ã„ã¾ã™ã€‚弊社ã®ã‚½ãƒ¼ã‚·ãƒ£ãƒ«ã‚¢ãƒ—リ「ボクイマã€ã¯ã€PHPã§ã¯ãªãJavaã§å®Ÿè£…ã•ã‚Œã¦ã„ã‚‹ã“ã¨ã‚’ã€å‰æã«ã—ã¦ã„ã¾ã™ã€‚ KLabã®èª¬æ˜Žãªã© 2000å¹´8月è¨ç«‹ 「DSAS Hostingã€ã¨ã„ã†ã‚µãƒ¼ãƒ“スをæä¾› 講演者ã®æ–¹ã®èª¬æ˜Žãªã© 森本ã•ã‚“ 2006年入社 2009年秋 ソーシャルアプリã®æ‹…当㫠発表内容ã«ã¤ã„㦠注æ„点モãƒã‚¤ãƒ«å‘ã‘ã®èª¬æ˜Žãƒ•ãƒ¬ãƒ¼ãƒ ワークã¯ã€CakePHP, Symphony ãªã©ã‚’利用 ãŸã ã—ã€å€‹åˆ¥ã®è©±ã¯ã—ãªã„Flashã®å‹•çš„åˆæˆã®è©±ã¯ã€æ™‚間制約ã§ã—ãªã„*1アジェンダ ãªãœé«˜è² è·å¯¾ç–ãŒå¿…è¦ã‹ï¼Ÿ 高è²
[ã‚¹ãƒ†ãƒƒãƒ—ã‚¢ãƒƒãƒ—ï¼ CakePHP] ã‚ャッシュ㫠memcached を使ㆠ| ãƒã‚·ãƒ£ãƒã‚°ã€‚
æ—©ãも蚊ã«åˆºã•ã‚Œã¾ã—㟠nakamura ã§ã™ã€‚ãã£ã¨ãŠã„ã—ãã†ãªã‚“ã§ã—ょã†ãã‡ã€‚分ã‹ã‚‹åˆ†ã‹ã‚‹ã€‚ 今日㯠CakePHP 連載㮠7 回目ï¼CakePHP ã®ã‚ャッシュをファイルã§ã¯ãªã memcached ã«ä¿å˜ã™ã‚‹æ–¹æ³•ã‚’紹介ã—ã¾ã™ã€‚ memcached ã£ã¦ï¼Ÿ データやオブジェクトをメモリ上ã«ä¿æŒã™ã‚‹ç‚ºã®ã‚ャッシュサーãƒã§ã™ã€‚ファイルã«ã‚ャッシュã™ã‚‹ã‚ˆã‚Šã‚‚高速ã«å‹•ä½œã—ã€PHP, Java, Perl ç‰ã‚’始ã‚ã¨ã™ã‚‹ãƒ—ãƒã‚°ãƒ©ãƒŸãƒ³ã‚°è¨€èªžã‚„ MySQL, PostgreSQL ã¨ã„ã£ãŸ RDBMS ãªã© memcached を利用å¯èƒ½ãªã‚¯ãƒ©ã‚¤ã‚¢ãƒ³ãƒˆã‚¢ãƒ—リケーションã¯ã¨ã¦ã‚‚多å²ã«æ¸¡ã‚Šã¾ã™ã€‚ ã“ã®è¾ºã‚ŠãŒè©³ã—ã解説ã—ã¦ãã‚Œã¦ã„ã¾ã™ã€‚ memcached - Wikipedia 特集：memcachedを知り尽ãã™ï½œgihyo.jp … 技術評論社 memcached をインストールã™ã‚‹ 今回㯠C
![[ã‚¹ãƒ†ãƒƒãƒ—ã‚¢ãƒƒãƒ—ï¼ CakePHP] ã‚ャッシュ㫠memcached を使ㆠ| ãƒã‚·ãƒ£ãƒã‚°ã€‚](https://cdn-ak-scissors.b.st-hatena.com/image/square/1f4390ea5b2b558adfd9c349b9a080aae407daff/height=288;version=1;width=512/https%3A%2F%2Fbashalog.c-brains.jp%2Fshared%2Fpublic%2Fimg%2Fcommon%2Ficon_ogp02.png)
[CakePHP] memcached を使ã£ã¦ã„ã‚‹å ´åˆã®ã‚ャッシュクリア方法 | ãƒã‚·ãƒ£ãƒã‚°ã€‚
ä¹…ã€…ç™»å ´ã€ã¿ãªã•ã‚“ã“ã‚“ã«ã¡ã¯ nakamura ã§ã™ã€‚今年ã“ãã¯ãƒ™ã‚¤ã‚¹ã‚¿ãƒ¼ã‚ºã®å„ªå‹ã‚’ä¿¡ã˜ã¦ç–‘ã„ã¾ã›ã‚“ï¼ã¼ã¡ã¼ã¡ãƒžã‚¸ãƒƒã‚¯ç‚¹ç¯ã—ã¡ã‚ƒã„ã¾ã™ã‚ˆï¼ ã•ã¦ã•ã¦ä»Šæ—¥ã¯ CakePHP ã®ã¡ã‚‡ã£ã¨ã ã‘æ·±ã„ãŠè©±ã—。ã‚ャッシュã®ä¿å˜å…ˆã« memcached を使ã£ã¦ã„ã‚‹å ´åˆã®å•é¡Œã¨å¯¾å‡¦æ³•ã«ã¤ã„ã¦ã§ã™ã€‚ CakePHP を使ã£ã¦ã„ã‚‹ã¨ã©ã†ã—ã¦ã‚‚ã‚ャッシュをクリアã—ãŸã„å ´é¢ãŒå‡ºã¦ãã‚‹ã¨æ€ã„ã¾ã™ãŒã€ãã‚“ãªæ™‚ã¿ãªã•ã‚“ã¯ã©ã†ã—ã¦ã„ã¾ã™ã‹ï¼Ÿãƒ•ã‚¡ã‚¤ãƒ«ã«ã‚ャッシュã—ã¦ã„ã‚‹ã®ã§ã‚ã‚Œã°ç›´æŽ¥å‰Šé™¤ã™ã‚‹äººãŒå¤šã„ã§ã—ょã†ã‹ 。memcached ã®å ´åˆã¯ã©ã†ã§ã—ょã†ï¼ŸCake ã® Cache クラスã«ã¯ clear ã¨ã„ã†ãƒ¡ã‚½ãƒƒãƒ‰ãŒã‚ã‚‹ã®ã§ã“れを使ã£ã¦ã‚·ã‚§ãƒ«ã‚’書ãã®ãŒè‰¯ã„ã‹ã‚‚ã—ã‚Œã¾ã›ã‚“。もã—ãã¯ã¡ã‚‡ã£ã¨ä¹±æš´ã§ã™ãŒã€memcached ã‚’å†èµ·å‹•ã—ã¡ã‚ƒã†ãªã‚“ã¦ã®ã‚‚ã‚ã‚‹ã‹ã‚‚ã§ã™ã。 大抵ã®å ´åˆã“ã‚Œã§å•é¡Œã¯ãªã•ãã†ã§ã™ãŒã€å®Ÿã¯ã‚ャッシュã®ä¿å˜
![[CakePHP] memcached を使ã£ã¦ã„ã‚‹å ´åˆã®ã‚ャッシュクリア方法 | ãƒã‚·ãƒ£ãƒã‚°ã€‚](https://cdn-ak-scissors.b.st-hatena.com/image/square/c7796aeff850adf4c767f9064eba6e857cd01e20/height=288;version=1;width=512/https%3A%2F%2Fbashalog.c-brains.jp%2Fimages%2Fcat_php.png)
Facebookã®ãƒ‡ãƒ¼ã‚¿ã‚»ãƒ³ã‚¿ãƒ¼ã«è¦‹ã‚‹MySQL活用事例 - MySQLカンファレンス
memcached用ã®ãƒ¦ãƒ¼ã‚¶å®šç¾©é–¢æ•° memcachedã¨MySQLã®é€£æºã¯ã€ã“ã“åŠå¹´ãらã„ã®é–“ã«æ€¥æ¿€ã«é€²ã‚“ã§ãŠã‚Šã€ç¾åœ¨ã§ã¯ã‚ˆã‚Šã‚¨ãƒ¬ã‚¬ãƒ³ãƒˆãªã‚½ãƒªãƒ¥ãƒ¼ã‚·ãƒ§ãƒ³ã‚‚出ã¦ãã¦ã„る。ãŸã¨ãˆã°ã€memcached用ã®ãƒ¦ãƒ¼ã‚¶ãƒ¼å®šç¾©é–¢æ•°(UDF)ã¨blackholeストレージエンジンを使ã†ã€ã¨ã„ã†æ‰‹ãŒã‚る。片方ã®ãƒ‡ãƒ¼ã‚¿ã‚»ãƒ³ã‚¿ãƒ¼ã§æ›´æ–°ã™ã‚‹éš›ã«ã€åŒæ™‚ã«blackholeテーブルã«å¯¾ã—ã¦UDFã¤ãã®INSERT文を実行ã™ã‚‹ã®ã§ã‚る。INSERTæ–‡ã¯ãƒ¬ãƒ—リケーションã•ã‚Œã‚‹ã®ã§ã€å対å´ã®ãƒ‡ãƒ¼ã‚¿ã‚»ãƒ³ã‚¿ãƒ¼ã§ãã®ä¸ã«ã‚ã‚‹UDFを実行ã—ã¦ã€memcachedã®ã‚ャッシュを更新ã§ãる。ã¾ãŸãƒˆãƒªã‚¬ãƒ¼ã‹ã‚‰blackholeテーブルã«INSERTã•ã›ã‚Œã°ã€ã‚¢ãƒ—リケーションプãƒã‚°ãƒ©ãƒ ã‹ã‚‰blackholeテーブルã¸ã®INSERTを実行ã™ã‚‹å¿…è¦ãŒãªã„ã®ã§ã€ã‚ˆã‚Šé€éŽçš„ã«ãªã‚‹ã€‚UDFã¯å…±æœ‰ãƒ©ã‚¤ãƒ–ラリ形å¼ã§ã‚ã‚Šã€MySQLã®æœ¬ä½“ソースã«å½±éŸ¿ãª
Facebookã€memcachedã«300TB以上ã®ãƒ©ã‚¤ãƒ–データを置ã大è¦æ¨¡é‹ç”¨ã®å†…å´
クラウドã®ã‚ˆã†ã«å¤§è¦æ¨¡ãªã‚·ã‚¹ãƒ†ãƒ ã§ã¯ã€ã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢ã®é–‹ç™ºã¨åŒç‰ä»¥ä¸Šã«ã€å¤§è¦æ¨¡é‹ç”¨ã®å·§æ‹™ãŒã€ã‚·ã‚¹ãƒ†ãƒ 全体ã®æˆåŠŸã‚’大ããå·¦å³ã—ã¾ã™ã€‚ 6月22æ—¥ã‹ã‚‰ã€ç±³ã‚µãƒ³ã‚¿ã‚¯ãƒ©ãƒ©ã§è¡Œã‚ã‚Œã¦ã„ãŸWebサイトã®ãƒ‘フォーマンスã¨é‹ç”¨ã«é–¢ã™ã‚‹ã‚ªãƒ©ã‚¤ãƒªãƒ¼ã®ã‚¤ãƒ™ãƒ³ãƒˆã€ŒVelocity 2010ã€ã§ã€Facebookã®Technical Operations teamを担当ã™ã‚‹Tom Cookæ°ãŒã€ŒA Day in the Life of Facebook Operationsã€ï¼ˆFacebooké‹ç”¨ã®ã‚ã‚‹1日）ã¨é¡Œã—ãŸã‚»ãƒƒã‚·ãƒ§ãƒ³ã§ã€FacebookãŒãµã ã‚“ã©ã®ã‚ˆã†ãªé‹ç”¨ã‚’è¡Œã£ã¦ã„ã‚‹ã‹ã€ç´¹ä»‹ã—ã¦ã„ã¾ã™ã€‚ 世界ã§ãƒˆãƒƒãƒ—クラスã®å¤§è¦æ¨¡ã‚µã‚¤ãƒˆãŒã€æ™®æ®µã©ã®ã‚ˆã†ãªãƒ„ールを用ã„ã€ã©ã®ã‚ˆã†ãªæ–¹æ³•ã§é‹ç”¨ã—ã¦ã„ã‚‹ã®ã‹ã€ã‚»ãƒƒã‚·ãƒ§ãƒ³ã®å†…容を紹介ã—ã¾ã—ょã†ã€‚ 6å¹´ã§4億アクティブユーザーã€3カ所ã®ãƒ‡ãƒ¼ã‚¿ã‚»ãƒ³ã‚¿ãƒ¼ Tom Cookæ°ã€‚Facebo
éŽè² è·ã«è€ãˆã‚‹WEBサービス作æˆã®ãŸã‚ã®ä½¿ãˆã‚‹PHPã‚ャッシュテクニックã¾ã¨ã‚:phpspot開発日誌
éŽè² è·ã«è€ãˆã‚‹WEBサービス作æˆã®ãŸã‚ã®ä½¿ãˆã‚‹PHPã‚ャッシュテクニックã¾ã¨ã‚。 サービス展開ã¨ã„ã†ã¨OSã®ãƒãƒ¥ãƒ¼ãƒ‹ãƒ³ã‚°ã‚„å„種インフラソフトウェアã®ãƒãƒ¥ãƒ¼ãƒ‹ãƒ³ã‚°ã€æ›´ã«ã¯WEBアプリプãƒã‚°ãƒ©ãƒ 自体ã®åŠ¹çŽ‡åŒ–ã¨ã€å¹…広ã„知è˜ãŒå¿…è¦ã«ãªã£ã¦ãã¾ã™ãŒã€PHPã§WEBアプリを作る際ã«ã‚ˆã効ãã‚ャッシュテクニックを用途・使ã„ã©ã“ã‚別ã«èª¬æ˜Žã—ã¾ã™ã€‚ ã‚ャッシュをã†ã¾ã効ã‹ã›ã‚‹ã“ã¨ã§å¤§å¹…ã«è¨ˆç®—é‡ã‚’減らã—ã¦ã‚ˆã‚Šå¤šãã®ãƒªã‚¯ã‚¨ã‚¹ãƒˆã‚’å°‘ãªã„マシンã§æŒãã“ã¨ãŒå‡ºæ¥ã€ã‚³ã‚¹ãƒˆã‚’下ã’ãŸã‚Šã€éŽè² è·ã®æ‚©ã¿ã‚’減らã›ã¾ã™ã€‚ 個人レベルã§ã®WEBサービス開発ã®å ´åˆã€ã‚µãƒ¼ãƒä»£ãŒãŠè²¡å¸ƒã‚’大ãã圧迫ã—ã¾ã™ãŒã€æœ€ä½Žã®ã‚³ã‚¹ãƒˆã§ã‚µãƒ¼ãƒ“スを賄ã†ã“ã¨ã«ç¹‹ã’られã¾ã™ã€ã¨ã„ã†ã“ã¨ã§PHPã§ã‚µãƒ¼ãƒ“ス作ã£ã¦ã‚„ã‚ã†ã¨æ€ã£ã¦ã„る人ã¯å‚考ã«ã—ã¦ã¿ã¦ä¸‹ã•ã„。 static変数ã§ã‚ャッシュ 特ã«ä½•ã‚‚入れãªãã¦ã‚‚ãã®ã¾ã¾ä½¿ãˆã‚‹static変数。例ãˆã°ã€é–¢æ•°ç‰ã§ä¸€å®šã®è¨ˆç®—
mixi大è¦æ¨¡éšœå®³ã«ã¤ã„㦠ãã®2 - mixi engineer blog
ã“ã‚“ã«ã¡ã¯ã€‚システム本部技術部ãŸã‚“ã½ã½Gã®æ£®æœ¬ã§ã™ 補足を追記ã—ã¾ã—㟠(2010/08/20 15時) 先日ã®mixi大è¦æ¨¡éšœå®³ã«ã¤ã„ã¦ã®ç¶šå ±ã§ã™ 今回ã¯å°ãƒã‚¿ã¯ã‚ã‚Šã¾ã›ã‚“ ã¯ã˜ã‚ã« ã¾ãšåˆã‚ã«twitter/blogãªã©ã‚’通ã˜ã¦ä»Šå›žã®å•é¡Œã®è§£æžã‚’è¡Œã£ã¦ã„ãŸã ã„ãŸã¿ãªã•ã‚“ã«æ„Ÿè¬ã®è¨€è‘‰ã‚’æ§ã’ãŸã„ã¨æ€ã„ã¾ã™ kzk_moverã•ã‚“ stanakaã•ã‚“ mala(bulkneets)ã•ã‚“ llameradaã•ã‚“ (é †ä¸åŒ) ã‚ã‚ŠãŒã¨ã†ã”ã–ã„ã¾ã—㟠書ãæ¼ã‚‰ã—ãŸäººã”ã‚ã‚“ãªã•ã„ memcachedã¯ã™ã”ㄠ今回ã®ä»¶ã§memcachedã«å¯¾ã—ã¦ä¸å®‰æ„Ÿã‚’æŒãŸã‚ŒãŸæ–¹ã‚‚ãŠã‚‰ã‚Œã‚‹ã¨ãŠèžãã—ã¾ã—㟠説明ä¸è¶³ã ã£ãŸã›ã„ã§èª¤è§£ã‚’与ãˆã¦ã—ã¾ã„申ã—訳ã‚ã‚Šã¾ã›ã‚“ ãã¡ã‚“ã¨è¨å®šãŠã‚ˆã³ç›£è¦–ã‚’è¡Œã£ã¦ã„ã‚Œã°é€šå¸¸ã®ä½¿ç”¨ã«ã¯ã¾ã£ãŸãå•é¡Œã¯ã‚ã‚Šã¾ã›ã‚“ 弊社ã«ã¦ -c 30万ã§èµ·å‹•ã—ãŸmemcachedã«å¯¾ã—ã¦ã€å…ˆã®ãƒ†ã‚¹ãƒˆã‚¹ã‚¯ãƒªãƒ—トã«
Big Data in Real-Time at Twitter
The document summarizes how Twitter handles and analyzes large amounts of real-time data, including tweets, timelines, social graphs, and search indices. It describes Twitter's original implementations using relational databases and the problems they encountered due to scale. It then discusses their current solutions, which involve partitioning the data across multiple servers, replicating and ind
repcached-2.0リリースã®ãŠçŸ¥ã‚‰ã›ã¨ã€è¶…ç°¡å˜ãªã‚µãƒ³ãƒ—ルコード : DSAS開発者ã®éƒ¨å±‹
repcached-2.0(memcached-1.2.5ベース) をリリースã—ã¾ã—ãŸã®ã§ãŠçŸ¥ã‚‰ã›ã—ã¾ã™ã€‚ http://lab.klab.org/modules/mediawiki/index.php/Repcached (日本語) http://repcached.lab.klab.org/ (英語) 今回ã®ç›®çŽ‰ã¯ãƒžãƒ«ãƒãƒžã‚¹ã‚¿æ§‹æˆã®ã‚µãƒãƒ¼ãƒˆã§ã™ã€‚ 以å‰ã®ãƒãƒ¼ã‚¸ãƒ§ãƒ³ã¯ãƒžã‚¹ã‚¿/スレーブ構æˆã ã£ãŸã®ã§ã€å¿…ãšãƒžã‚¹ã‚¿ã¸æ›¸ãè¾¼ã¾ãªã‘ã‚Œã°ã„ã‘ã¾ã›ã‚“ã§ã—ãŸã€‚ãã®ãŸã‚ã€æŽ¥ç¶šå…ˆã®ã‚µãƒ¼ãƒãŒãƒžã‚¹ã‚¿ãªã®ã‹ã©ã†ã‹ã‚’クライアントãŒåˆ¤åˆ¥ã—ãªã‘ã‚Œã°ã„ã‘ãªã‹ã£ãŸã‚Šã€keepalivedãªã©ã¨ä½µç”¨ã™ã‚‹ãªã©ã®å·¥å¤«ãŒå¿…è¦ã§ã—ãŸãŒã€ä»Šå›žã®ãƒãƒ¼ã‚¸ãƒ§ãƒ³ã§ã¯ãã®å¿…è¦ãŒãªããªã‚Šã¾ã™ã€‚両方ã®ã‚µãƒ¼ãƒã«å¯¾ã—ã¦ãƒ‡ãƒ¼ã‚¿ã‚’書ã込むã“ã¨ãŒã§ãるよã†ã«ãªã£ãŸã®ã§ã€ã‹ãªã‚Šä½¿ã„ã‚„ã™ããªã£ãŸã¨æ„Ÿã˜ã¦ã„ã¾ã™ã€‚ repcachedã¯ãƒ‘フォーマンスを最é‡è¦–ã—ã¦ã„ã‚‹
Repcached - KLablabWiki
repcachedã«ã¤ã„㦠repcachedã¨ã¯ã€memcachedã«ãƒ‡ãƒ¼ã‚¿ã®ãƒ¬ãƒ—ãƒªã‚±ãƒ¼ã‚·ãƒ§ãƒ³æ©Ÿèƒ½ã‚’è¿½åŠ å®Ÿè£…ã—ãŸã‚‚ã®ã§ã™ã€‚ memcachedã¯ã€ä»¥ä¸‹ã®ã‚ˆã†ãªã¨ã“ã‚ã«ã‚ˆã使ã‚れるã¨æ€ã„ã¾ã™ã€‚ 一時的ãªãƒ‡ãƒ¼ã‚¿ã®ä¿å˜å ´æ‰€ã¨ã—㦠ã‚ャッシュをä¿å˜ã™ã‚‹å ´æ‰€ã¨ã—㦠RDBMSã®ãƒ‡ãƒ¼ã‚¿ã®ã‚ャッシュ 生æˆã—ãŸãƒšãƒ¼ã‚¸ãƒ‡ãƒ¼ã‚¿ã®ã‚ャッシュ ã„ãšã‚Œã®å ´åˆã‚‚消ãˆã¦ã„ã„データãªã®ã§ã€ä¸‡ãŒä¸€memcachedãŒãƒ€ã‚¦ãƒ³ã—ã¦ã‚‚å•é¡Œã¯ãªã„ã¯ãšã§ã™ã€‚ ã—ã‹ã—ã€å½±éŸ¿ãŒå…¨ããªã„ã‚ã‘ã§ã¯ã‚ã‚Šã¾ã›ã‚“。 例ãˆã°ã€MySQLã®ãƒ‡ãƒ¼ã‚¿ã‚’memcachedã§ã‚ャッシュã—ã¦ã„ã‚‹å ´åˆã€memcachedãŒãƒ€ã‚¦ãƒ³ã—ã¦ã„ã‚‹é–“ã¯ç›´æŽ¥MySQLã«ã‚¢ã‚¯ã‚»ã‚¹ãŒã„ãã“ã¨ã«ãªã‚ŠDBサーãƒã®è² è·ãŒä¸ŠãŒã‚Šã¾ã™ã€‚ã¾ãŸã€memcachedã‚’å†èµ·å‹•ã—ã¦ã‚ャッシュãŒå¤±ã‚ã‚ŒãŸå ´åˆã¯ã€å†ã³ã‚ャッシュãŒæºœã¾ã‚‹ã¾ã§ã¯DBサーãƒã«è² è·ãŒã‹ã‹ã‚‹ã“ã¨ã«ãªã£ã¦ã—ã¾ã„ã¾ã™ã€‚ ã“ã®ã‚ˆã†ã«
memcached＋PostgreSQLã§å®Ÿç¾ã™ã‚‹ãƒã‚¤ãƒ‘フォーマンスWebアプリケーション構築（1/4） ― ï¼ IT
本稿ã®å‰æ環境 memcached 1.2.5 データベース：PostgreSQL 8.3.1 OS：CentOS 5（Linux kernel 2.6 ） シェル：bash CPU：Intel Core2Quad 9660 2.4GHz RAM：PC2-6400 8GBytes memcachedã¯ã€Danga Interactiveã«ã‚ˆã£ã¦é–‹ç™ºã•ã‚ŒãŸã‚ªãƒ¼ãƒ—ンソースã®ãƒ¡ãƒ¢ãƒªã‚ャッシュサーãƒã§ã™ã€‚ メモリ上ã«ãƒ‡ãƒ¼ã‚¿ã‚’ä¿å˜ã™ã‚‹ã®ã§memcachedを終了ã™ã‚‹ã¨ãƒ‡ãƒ¼ã‚¿ãŒå¤±ã‚ã‚Œã¾ã™ãŒã€ï¼ˆOracleã‚„MySQLã¨ã„ã£ãŸï¼‰RDBMSã¨æ¯”較ã™ã‚‹ã¨ã‘ãŸé•ã„ã®é«˜é€Ÿãƒ¬ã‚¹ãƒãƒ³ã‚¹æ€§èƒ½ã‚’有ã—ã€æ•°åƒä¸‡ä»¶ã¨ã„ã†å¤§é‡ã®ãƒ‡ãƒ¼ã‚¿ã‚’扱ã£ã¦ã‚‚ã»ã¨ã‚“ã©æ€§èƒ½ãŒåŠ£åŒ–ã—ãªã„ã¨ã„ã†ç‰¹å¾´ãŒã‚ã‚Šã¾ã™ã€‚ 機能ã¯é™ç•Œã¾ã§åˆ‡ã‚Šè©°ã‚られã€åŸºæœ¬çš„ã«ã¯ã‚ーã¨ãƒ‡ãƒ¼ã‚¿ã®çµ„（以下ã€itemã¨å‘¼ã³ã¾ã™ï¼‰ã®ä¿å˜ã¨æ¤œç´¢ã¨å‰Šé™¤ã—ã‹ã§ãã¾ã›ã‚“。 ã«ã‚‚ã‹ã‹ã‚らãšã€me
GREE Engineering
404 ãŠæŽ¢ã—ã®ãƒšãƒ¼ã‚¸ã¯è¦‹ã¤ã‹ã‚Šã¾ã›ã‚“ GREE Engineering トップã¸æˆ»ã‚‹
memcachedを知り尽ã㙠記事一覧 | gihyo.jp
é‹å–¶å…ƒã®ãƒã‚´ Copyright © 2007-2024 All Rights Reserved by Gijutsu-Hyoron Co., Ltd. ページ内容ã®å…¨éƒ¨ã‚ã‚‹ã„ã¯ä¸€éƒ¨ã‚’ç„¡æ–ã§åˆ©ç”¨ã™ã‚‹ã“ã¨ã‚’ç¦æ¢ã—ã¾ã™â 。個別ã«ãƒ©ã‚¤ã‚»ãƒ³ã‚¹ãŒè¨å®šã•ã‚Œã¦ã„る記事ç‰ã¯ãã®ãƒ©ã‚¤ã‚»ãƒ³ã‚¹ã«å¾“ã„ã¾ã™ã€‚
Facebookã«ãƒã‚°ã‚¤ãƒ³
Facebookã«ãƒã‚°ã‚¤ãƒ³ã—ã¦ã€å‹é”や家æ—ã¨å†™çœŸã‚„è¿‘æ³ã‚’シェアã—ã¾ã—ょã†ã€‚
第2回　memcachedã®ãƒ¡ãƒ¢ãƒªã‚¹ãƒˆãƒ¬ãƒ¼ã‚¸ã‚’ç†è§£ã™ã‚‹ | gihyo.jp
æ ªå¼ä¼šç¤¾ãƒŸã‚¯ã‚·ã‚£ ç ”ç©¶é–‹ç™ºã‚°ãƒ«ãƒ¼ãƒ—ã®å‰å‚ã§ã™ã€‚å‰å›žã®è¨˜äº‹ã§memcachedã¯åˆ†æ•£ã«é•·ã‘ãŸé«˜é€Ÿãªã‚ャッシュサーãƒã§ã‚ã‚‹ã“ã¨ãŒç´¹ä»‹ã•ã‚Œã¾ã—ãŸã€‚今回ã¯memcachedã®å†…éƒ¨æ§‹é€ ãŒã©ã†å®Ÿè£…ã•ã‚Œã¦ã„ã‚‹ã®ã‹ã€ãã—ã¦ãƒ¡ãƒ¢ãƒªãŒã©ã†ç®¡ç†ã•ã‚Œã¦ã„ã‚‹ã®ã‹ã‚’ã”紹介ã—ã¾ã™ã€‚ã¾ãŸã€memcachedã®å†…éƒ¨æ§‹é€ ã®äº‹æƒ…ã«ã‚ˆã‚‹å¼±ç‚¹ã‚‚紹介ã—ã¾ã™ã€‚ メモリを整ç†ã—ã¦å†åˆ©ç”¨ã™ã‚‹Slab Allocationメカニズム昨今ã®memcachedã¯ãƒ‡ãƒ•ã‚©ãƒ«ãƒˆã§Slab Allocatorã¨ã„ã†ãƒ¡ã‚«ãƒ‹ã‚ºãƒ を使ã£ã¦ãƒ¡ãƒ¢ãƒªã®ç¢ºä¿ãƒ»ç®¡ç†ã‚’è¡Œã£ã¦ã„ã¾ã™ã€‚ã“ã®ãƒ¡ã‚«ãƒ‹ã‚ºãƒ ãŒç™»å ´ã™ã‚‹ä»¥å‰ã®ãƒ¡ãƒ¢ãƒªç¢ºä¿ã®æˆ¦ç•¥ã¯ã€å˜ç´”ã«ã™ã¹ã¦ã®ãƒ¬ã‚³ãƒ¼ãƒ‰ã«å¯¾ã—ã¦mallocã¨freeã‚’è¡Œã†ã¨ã„ã£ãŸã‚‚ã®ã§ã—ãŸã€‚ã—ãŒã—ãªãŒã‚‰ã€ã“ã®ã‚¢ãƒ—ãƒãƒ¼ãƒã§ã¯ãƒ¡ãƒ¢ãƒªã«ãƒ•ãƒ©ã‚°ãƒ¡ãƒ³ãƒ†ãƒ¼ã‚·ãƒ§ãƒ³ï¼ˆæ–片化）を発生ã•ã›ã¦ã—ã¾ã„ã€OSã®ãƒ¡ãƒ¢ãƒªãƒžãƒãƒ¼ã‚¸ãƒ£ã«è² è·ã‚’ã‹ã‘ã€æœ€æ‚ªã®å ´åˆã ã¨memcachedã®ãƒ—
ã€ãƒã‚¦ãƒ„ー】memcached client for java - Javaã§memcachedを使ãŠã† (1) データをメモリ上ã«ä¿æŒã™ã‚‹ã‚ャッシュサーム| エンタープライズ | マイコミジャーナル
memcachedã¨ã¯? memcachedã¨ã¯ãã®åã®é€šã‚Šã€ãƒ‡ãƒ¼ã‚¿ã‚’メモリ上ã«ä¿æŒã™ã‚‹ã‚ャッシュサーãƒã§ã€ã‚¢ã‚¯ã‚»ã‚¹æ•°ã®å¤šã„Webサイトã«ãŠã„ã¦ãƒ‡ãƒ¼ã‚¿ãƒ™ãƒ¼ã‚¹ã®è² è·ã‚’減らã™ãŸã‚ã«åˆ©ç”¨ã•ã‚Œã‚‹ã“ã¨ãŒå¤šã„。データをディスクã«æ›¸ã出ã•ãšã€ä¿æŒã™ã‚‹ãƒ‡ãƒ¼ã‚¿ã‚‚ã‚ーã¨å€¤ã®ã¿ã¨éžå¸¸ã«ã‚·ãƒ³ãƒ—ルã§ã‚ã‚‹ãŸã‚動作ã¯é«˜é€Ÿã ãŒã€memcachedを終了ã™ã‚‹ã¨ãƒ‡ãƒ¼ã‚¿ãŒå¤±ã‚ã‚Œã¦ã—ã¾ã†ã¨ã„ã†å•é¡ŒãŒã‚る。ãã®ãŸã‚memcachedã«ã¯æ¶ˆå¤±ã—ã¦ã‚‚å•é¡Œã®ãªã„データã®ã¿ã‚’æ ¼ç´ã™ã‚‹ã‚ˆã†ã‚·ã‚¹ãƒ†ãƒ è¨è¨ˆã‚’è¡Œã†å¿…è¦ãŒã‚る。 ãªãŠã€memcached互æ›ã®ã‚ャッシュサーãƒã¨ã—ã¦ã€ãƒ‡ãƒ¼ã‚¿ã‚’ディスクã«æ°¸ç¶šåŒ–ã™ã‚‹æ©Ÿèƒ½ã‚’å‚™ãˆãŸmemcachedbã‚„ã€ãƒ¬ãƒ—リケーション機能を備ãˆãŸrepcachedãŒã‚る。 Javaå‘ã‘ã®memcachedクライアントã¯ã„ãã¤ã‹å˜åœ¨ã™ã‚‹ãŒã€æœ¬ç¨¿ã§ç´¹ä»‹ã™ã‚‹ã®ã¯memcached client for java。LGPLã§æä¾›ã•
1
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
English (US)
{{#tags}}- {{label}}
{{/tags}}