こんにちは、ネコ派メタラーです。ナビタイムジャパンで地点検索基盤の開発マネジメントを担当しています。好きなバンドは Arch Enemy です。 システム運用に関わる人であれば、「システム障害」というと耳が痛い方が多いかと思います。システム障害は起こさないに越したことはないですが、万が一システム障害が発生したとき、その行動選択はサービスの信頼性を大きく左右することになります。 迅速に復旧させることはもちろんですが、適切な情報公開によってユーザーの不安を払拭するといったコミュニケーションも重要なポイントです。しかし、緊急事態というプレッシャーを受けながら最適な行動を選択することは容易ではありません。 私が所属しているチームでは、Web API サーバソフトウェアから全文検索ミドルウェアまで含めた開発・運用を行っており、幅広いトラブル対応スキルが必要になります。トラブル対応のスキルを持ったベテ

何故報告書が必要なのか？ 公開されている情報だけでは、どうにも収まらない報告書。 何故、お客様は、そんなに細かい部分を気にして知りたがるんでしょうか？ 運用部門や開発部門に情報を求めても、そんな事を要求してくるのは一部のお客様だけだと言われ、下手をするとお客様の期待値コントロールが出来ていないと怒られてしまうこともありますよね。 でも、お客様だって困っているんです。だって、誰かに報告しなきゃいけないんだもの。 そう。ほとんどの場合、報告書は更に報告されて行くのです。 報告書をお客様に渡した後、どこでどんな風に使われているのか考えてみましょう。 相手の報告先を想定しておくと、良い報告書のイメージが掴みやすいです。 主要な3つのポイント 1.　結局何が問題だったのか？（バグ？プロセス？オペミス？） 2.　何に対して謝るのか？（出来ていなかった事は何？） 3.　本来あるべき姿は何なのか？（短期、

このブログ記事で 「MultiAZ」にしていたら何事も全て大丈夫という認識を変えられると嬉しいです （当該の時点で障害起こした人はちゃんとMultiAZにしてなかったんでしょ？という人の認識も変えられると嬉しいです）。 MultiAZにしておくことは基本 です。 その上でも、 安心しきらずに監視は必要 という話をしています。 MultiAZ構成にしておきましょう そのうえで監視、検知、トレーサビリティを大切にしましょう MultiAZ要らないという見当外れの解釈はしないでください （一部、間違えた解釈をしてるコメントも見受けられましたが、大いに違います）。 前提 2019-08-23、AWSで大規模な障害が起こりました。 障害の一般的な内容は以下のとおりです。 まとめのブログ https://piyolog.hatenadiary.jp/entry/2019/08/23/174801 AW

Youtube（ユーチューブ)は動画共有サイトです。オリジナルコンテンツ制作者や広告主の有効な配信プラットフォームとして世界中で利用されています。

NHKドキュメンタリー - ＥＴＶ特集 アンコール▽ホロコーストのリハーサル～障害者虐殺７０年目の真実 2016年10月1日(土) 午前0時00分(60分) 　　再放送 ---- こうして人々が沈黙する中すすんでいった障害者の虐殺．そんな中，ついにある人が声を上げました．それは，ドイツ北西部の町ミュンスターの司教だった，クレメンス・アウグスト・フォン・ガーレンでした． Cardinal Clemens-August Graf von Galen oil portrait by Wilhelm Lautenbach, 1935- Dauerleihgabe des Stadtmuseums Münster.  Pope Benedict XVI: Cardinal Clemens August von Galen 10/9/05 - Eastertide 2008 フォン・ガーレンの耳にも信

私はNと申します。41歳のフリーランスのウェブコンサルタントです、2年前に脱サラしました。家族は妻と子1人。秋にはもう1人生まれます。横浜市の家賃14万円の賃貸マンションで生活しています。 脱サラした直後、200万円くらいあった貯蓄がみるみるうちに30万円を切ってしまいました。その大きな要因の一つが、生命保険の年払い保険料が35万円、一気に引き落とされたことでした。 その時、私は、その出費自体はイヤだとは思いませんでした。なぜなら、子どもが生まれた直後であり、生命保険は家族を守るために絶対に必要だと思ったからです。ただ、それなりに高いお金なので、「保険は今のままでいいのかな？」という疑問も湧いたのを覚えています。 しかし、その後、起業後の仕事の面白さと忙しさにかまけて、ほったらかしにしていました。 そんな時、ちょうど「保険の教科書」の出岡さんから、私の脱サラ後のお金の話についての取材を受け

失敗を学びに変える「障害報告書」の書き方 ─ RettyのCTOがGoogleで学んだ「問題を隠さない文化」 人間は失敗するものです。エンジニアもまたしかり。Retty株式会社の樽石CTOが考える、失敗を学びに変える考え方とノウハウを紹介します。 はじめまして。Retty株式会社でCTOを務める樽石将人（ @taru0216）です。Rettyにおける技術の責任者として不確実性の高いシステム開発を成功に導くよう牽引したり、メンバーが働きやすくなるような仕組みづくりを行ったりしています。 子供の頃からパソコンに親しみ、新卒一期生でレッドハットに就職して、Rettyに入社するまでGoogleや楽天を経てきました。エンジニアとして活動して約30年。日々失敗し続けていますし、過去には大規模サービスを止めてしまったこともあります。 人間である以上、バグやエラーは必ず起こるもの。エンジニアは失敗を繰り返

同期方法ごとにメリットとデメリットがありますが、今回はデータ量が多すぎて、復旧の時間を優先するため、rsyncメソッドを選びました。 同期方法の詳細については、Galera Clusterのマニュアルを参考してください。 Step 5.初期ノード（192.168.0.1）を起動する /etc/mariadb/cluster/mysql.server start --wsrep-new-cluster Starting MySQL.... SUCCESS! 確認する(一部抜粋) MariaDB [(none)]> show status like 'wsrep%'; +------------------------------+--------------------------------------+ | Variable_name | Value | +---------------

先週末、2016年1月16日から17日にかけて、GMOインターネットが提供するレンタルサーバやドメイン名登録などのサービスで管理画面が表示できなくなるなどの障害が約24時間にわたり発生しました。 GMOインターネットはWebサイトで影響の範囲や復旧状況などを報告、それによると障害の影響範囲は、お名前.com、レンサバ.comなどに加え、ConoHa byGMO、GMOアプリクラウドなどクラウドサービスまで広範囲に渡っています。 また、障害の原因は「データセンター内における電源設備の一部故障」とされました。 24時間という長時間かつ広範囲に発生した障害の実態はどうだったのか、また原因とされた電源設備の一部故障とはどのようなものだったのか、GMOインターネットの発表は詳細部分について触れられていなかったため、PublickeyではGMOインターネットに対して取材を申し込みました。 GMOインタ

こんにちは、らくからちゃです。 先週の木曜日は、2ヶ月に一度の年金受給日でした。我が家では、家内が障害年金を受給している都合上、一般の人よりほんのすこしだけ知識があるのですが、多くの『健康な人』にとって障害年金は未知の世界だと思います。 年金は大きく『国民年金』『厚生年金』の2つに別れますが、それぞれ年金の支払額は『国民年金保険料』『厚生年金保険料』と呼ばれます。そもそも年金とは、何らかの事情で働けなくなるなった時に、自分と家族の収入を保証するための『保険』です。『保険金』は、 老齢年金・・・一定年齢以上となった時 遺族年金・・・死亡した時 障害年金・・・障害を負って働けなくなった時 の際に、支払われます。年金の話題といえば、定年後に受け取れる（かどうかが怪しいと言われる）老齢年金の話が多く、障害年金について語られることは少ないんじゃないのかなあと思います。まあ、多くの健康な人にとって、障

You have been redirected here because the page you are trying to access has been archived. AWS re:Post is a cloud knowledge service launched at re:Invent 2021. We've migrated selected questions and answers from Forums to AWS re:Post. The thread you are trying to access has outdated guidance, hence we have archived it. If you would like up-to-date guidance, then share your question via AWS re:Post.

2012年07月02日07:00 Amazonの障害と利用規約による免責 ― ウェブサービス利用規約の「日本流」と「米国流」を比較してみる カテゴリ法務＿契約法務 businesslaw Comment(0)Trackback(0) 先週は日本のファーストサーバ、今週はAmazonと、世界各地で相次いでクラウド／データセンターの障害が発生し、その上でサービスを展開する法人に大打撃を与える事態が発生しています。あれ？自前でサーバーを持つよりもそういうリスクが低減できるのがいいところじゃなかった？という感じですが、ファーストサーバはメンテナンス中の事故、Amazonは自然現象が原因とはいえ、事業を支えるシステム・データを人に預けてしまうことの危険性を改めて認識させてくれています。 ▼Amazon EC2が落雷で障害　InstagramやPinterestがダウン（ITmedia） 米Amazo

えらいことなってますが。 正規手順と今回の現象の説明などを含めた中間報告が出されています。 http://support.fsv.jp/info/nw20120625_01.html ここで、正規手順で、途中でオペレーションミスがあったときに復旧できない状態になってしまう可能性があることがわかります。 具体的には「原因3：メンテナンス仕様」のこの部分。 脆弱性対策のメンテナンスに関しては対象サーバー群とそのサーバー群のバックアップ領域に対して同時に更新プログラムを適用する この時点でこの更新プログラムに不具合があった場合には、リストアできなくなることになるわけです。そして今回はそれがおきたようです。 より安全な手順であれば、バックアップ側にパッチをあてている間は正常系がバックアップのバックアップということになるはず*1ですが、どこにもバックアップがない状態になってしまったわけです。 手順１

公開日：2012年6月21日 カテゴリ：アレな話題 ホームページが障害で表示されないとか、アクセス過多で重たすぎる程度なら許容の範囲ですけども、サーバーのデータが初期化されましたという、Web屋としては笑えない、むしろ笑うしかない状況が発生しましたよ。 それも稼働率100％保証のファーストサーバーさんというのも驚きでございます。 今回サーバーデータ初期化事故に遭遇してしまった X_urara_X さんに状況を取材させていただきながら、損害の保証はされるのかどうか、規約（約款）を確認してみました。 【2012.6.25追記】 中間報告が掲載されたので記事を書きました。ファーストサーバーの事故原因がほぼ人災だった。その概要と今後についてまとめてみました。｜楽しければいいのです。 信頼のファーストサーバーがまさかの・・・ Web屋にとって顔面蒼白な事故（障害）がございましたねー。 ファーストサー

機械忍者 @cyborg__ninja 主に「くだらないこと」「デジタル機器系」「すげぇと思ったもの」「Googleなどの検索エンジンもの」「マーケットやアンケート調査」「サッカー」「ゲーム」「ロードバイク（自転車）」などの情報をピックアップしています。たまにSEO、Ruby、CMSなどのナレッジログがあります。 まあやってくれましたわ。 年末年始にかけて、さくらクラウドさんのご対応含めて時系列含めて障害があったんだぜということを記録しておいてやろうということです。 (さくらクラウドさんは是非これで対応含めて改善いただけることを当然期待しての投稿です) なお、フォロー等のつもりではないですが、さくらのVPSサービスや専用サーバサービスで不満は一切ありません。価格帯の割には落ちないし良い＆(共用サービスは除きますが)SSH等も使わせてくれて便利で助かるわーと、いわゆる「高評価」でした。 それ