いつもM研テックブログをご覧いただきまして、ありがとうございます。朝日新聞社メディア研究開発センター（M研）の田森です。 さて、M研では研究用のGPU搭載サーバーをはじめとして、何台かのオンプレサーバーやNASが存在します。 見えなくなるまで続く（うそ）弊社サーバールーム結構台数があるので、それなりの管理が必要なのですが、中でも困っているのは 各ストレージはどれくらい使われているのか？ GPUはどのサーバーででどのくらい動いているのか？ がなかなか分かりづらい。これらの項目を含めて、サーバーの状況を包括的に監視できるものを探していたのですが、 mackerel というサービスで実現できそうなことがわかり、試してみました。 Disclaimer当記事の内容については、mackerelを運営されている株式会社はてな様の保証や推薦を得たものではなく、弊社で独自に実施した内容をまとめたものです。

エンジニア大好き「推測するな、計測せよ」。これは、Plan 9, UTF-8やGoの作者としても知られる、Rob Pike氏の Rob Pikes's 5 Rules of ProgrammingのRule 3.に由来すると認識している。以下に原文を引用する。 Rule 3. Measure. Don't tune for speed until you've measured, and even then don't unless one part of the code overwhelms the rest. Rob Pike's 5 Rules of Programming 訳すと以下のようになる。 「計測せよ。計測するまでチューニングをするな、そしてそこが支配的じゃないならチューニングするな。」 要は「チューニングする前に計測せよ」という主張で「推測」と言う言葉は出てこない。なの

この記事は Mackerel Advent Calendar 2023 の12月6日の記事です。 qiita.com 昨日はid:mds_boyさんでした。 mds-boy.hatenablog.com ぼくについて 株式会社はてなでプロダクト開発チームのマネージャー。得意な技術はGoogleスプレッドシート。金勘定とトラブル対応が好物です。ノンエンジニアです。 今日の話 サーバー監視サービスであるMackerelは、エンジニアのツールという印象があるかもしれません。実際ぼくもチームのアカウントでは閲覧権限しか持っておらず、もっぱらダッシュボードから各種のメトリクスをみるだけなのですが、それが閲覧できないとぼくの業務は成り立ちません。というわけで今日はノンエンジニアなりに利用しているシーンを書きます。 PWGでエンジニアと一緒にグラフを眺める はてなのプロダクトチームでは、月に1回PWG（

この記事ははてなエンジニア Advent Calendar 2022 1日目の記事です。 こんにちは、id:arthur-1 です。2022年に新卒入社して、Mackerel 開発チームのアプリケーションエンジニアをやっています。 arthur-1 という id に掛けて、トップバッターをいただきました。よろしくお願いします。 今日は Advent Calendar を Mackerel で監視している話をします。 Advent Calendar で何を監視したいのか id:arthur-1 は、Mackerel Advent Calendar 2022 の運営をしています。こちらは、Mackerel ユーザーが TIPS やノウハウ、利用事例などを載せていく自由参加のカレンダーになっています。 Advent Calendar 企画の主催になると、どれだけの方が参加しているか、枠がパンパン

2008年にサンフランシスコでスタートしたTwilioは、音声電話やSMS（電話番号宛テキストメッセージ）のプログラマブルなCPaaS（Communications Platform as a Service）です。電話の自動発呼やSMSの送受信ができるAPIを提供し、ソフトウェア開発者がさまざまなコミュニケーション手段を自作のプログラムに組み込めるようにします。 こういったクラウドサービスは、一般のエンドユーザーに向けたサービスを展開したい事業者によって利用されるため、多くの開発者に受け入れられなけばなりません。APIを利用して新たなサービスを作り出す開発者と良好な関係を構築し、顧客である事業者それぞれのビジネスを成長させるポイントは何でしょうか？ KDDIウェブコミュニケーションズ（以下、KWC）でTwilioのエバンジェリストとして活動し、赤い芸人とも呼ばれる高橋克己（@_katsu

この度、お仕事として公式エバンジェリストをすることになりました。 セミナー講師をやったり、Mackerelの便利な使い方をアウトプットしたりするのが役割です。 MackerelチームにはCREってロールがあるわけですが、その中でも顧客活動のサポートにあたります。 ついにMackerelプラグイン解説シリーズの続編とか出るかもしれません*1。 初回活動 プライベートセミナーをやります。 詳細は下記のページを御覧ください。 日時：2022年2月10日（木） 14:00〜15:00 会場：Zoom Webinar 参加費用：無料 お申し込み：イベントページからお申し込みください はじめてのMackerelクラウド監視入門編（2022年2月10日開催オンラインセミナー） connpassもあるけど、申込みは上記のサイトです。 mackerelio.connpass.com はてなはCREを募集して

このエントリはMackerel Advent Calendar 2021の3日目の記事です。 最初にお断りしておくと、この話は4年以上前の昔話であり、私は既にMackerelチーム、はてな社から離れています。なので、ここで書くミッション・ビジョン・バリュー(MVV)はあくまで当時のものであり、今は別の形になっているでしょう。ですので、ここで書く話はただの昔話です。現在のMackerelに変に影響を与えたくはないと思っていることを予め書いておきます。 以前MVVの話を友人とした時に興味深く聞いてもらい、ユニークだとも言ってもらえたことがあったので、それらを決める過程の話や、浸透させようとした方法を書いてみるのも誰かの参考になるかもしれないと思い、これを書いています。 プロダクトマネージャー就任とMVV 私はMackerelのプロダクトマネージャーになった最初の頃に、MVVの策定に取り組みまし

このエントリーは、Mackerel Advent Calendar 2020 5日目の記事です。 さて、多くの人が「自分は文章を書くのが遅い」と思っているのではないでしょうか。僕もそう思っていました。 ブログエントリーを書き出すと得てして思っていた以上の時間がかかります。書くことがだいたい決まっているちょいネタのつもりであっても書き出してみたら数時間かかってしまう、大作であれば丸一日潰れてしまったり、しばらく寝かして数日がかりになることも珍しくありません。そして「ああ、自分は文章を書くのがなんて遅いのだ」と嘆いてしまうのです。 そして、見事な大作ブログ記事をバンバン投稿している人を見ると「書くのが速い人は羨ましいなー」と羨望してしまいます。また故栗本薫氏が、一時間に原稿用紙96枚分を書いたなどの伝説を聞くに、圧倒されて唖然としてしまい、やる気を失ってしまいそうになります。 しかし果たして本

プロダクトチームにおけるスキル維持の難しさ プロダクトの運用には、さまざまな知識やスキルが必要です。プロダクトに対するドメイン知識や、プロダクトを実装するために用いているプログラミング言語。アプリケーションフレームワークやミドルウェア、インフラなど数え上げればキリがありません。プロダクトを長い期間運用していくためには、これらの知識やスキルをどのようにチーム内にとどめておくか、ということを考えていく必要があります。 これらは、さまざまな要因でチームから失われていきます。改修や機能追加などで頻繁に手が入るところは良いのですが、あまり手が入らない領域は時間とともに記憶から消えていきます。ドキュメンテーションをしっかりすることである程度防げますが、それでも失われる暗黙知は存在します。また、異動や退職などによって人がチームから去ることもあります。異動や退職の際に、ほとんどの現場では引き継ぎが行われる

「以前は『動いているシステムは不必要に触るな』というのが主流だったが、それはもう昔の話。ソフトウェアを取り巻く周辺環境の変化は激しく『インターネットとつながり、さまざまなサービスと連携するソフトウェア』が当たり前に存在している。そうなればOSのバージョンアップやブラウザのアップデート、日々発見される新しい脆弱（ぜいじゃく）性など周辺環境の変更に追従するために、頻繁にシステム変更が発生する」 しかも、スマートフォンの自動アップデートのように、もはやソフトウェアの更新はユーザーが意識することなく実施されるものになっている。ユーザーに意識させずにソフトウェア更新をするためには、テストやデプロイを自動化する「CI/CD整備」「監視の整備」「DevOpsの構築」が必要だと粕谷氏は語る。 Mackerelの場合は管理ソフト「Jenkins」を利用してCIを実現し、サーバ監視にはMackerelを使って

この半年で変わったものと変わらないもの - SaaS開発の現場より / Developers Summit 2020 Summer

はじめに 2020年2月14日に開催されたDevelopers Summit2020に参加してきました。 event.shoeisha.jp テーマ 【14-B-4】プロダクトを10年運用するチームをつくる カテゴリ エンジニア組織 登壇者 粕谷 大輔さん [はてな] @daiksy はてな 2012年入社 KPTとは かすや　ぱねえ　天才www Mackerelチームディレクター 認定スクラムマスター Mackerelとは サーバ監視をSaaSで行っている 発表資料 speakerdeck.com 講演メモ 変化し続ける周辺環境とSystem プロダクトを10年安定稼働させる極意とは？ 昔はCloudなんてなかった。基幹システムなどがメイン 当時の格言 動いているシステムはさわるな 10年触らないことが極意？ 今日のセミナーは、完wwww 周辺環境の変化が激しい OSのメジャーアップデー

k1LoW @k1LoW 書きました / 1件のコメント b.hatena.ne.jp/entry/s/k1low.… “Mackerel plugin (mackerel-plugin-prometheus-exporter) を書いてみた #mackerelio - Copy/Cut/Paste/Hatena” (1 user) htn.to/2oGbuia5Bi 2019-12-23 08:34:11 a-know | Daisuke Inoue @a_know わいわい、ありがとうございますっ！そして初めてのプラグインが Prometheus Exporter plugin とは、かっこよすぎる……！ / “Mackerel plugin (mackerel-plugin-prometheus-exporter) を書いてみた #mackerelio - Copy/Cut/Past

この記事はMackerelアドベントカレンダー9日目の記事です。 今年新たに作ったmackerel pluginの数がとても少なかったのでショックを受けているMackerelアンバサダーのkazeburoです。 この記事ではそのうちの一つを紹介します。 mackerel-agent-pinging github.com 公式のpluginとして、check-pingがありますが、こちらはmetricsを取得するためのpluginとなります。 ariarijp さんによる mackerel-plugin-ping もありますが、こちらとは取得しているメトリクスが異なります。 github.com 使い方 $ sudo /usr/local/bin/mackerel-plugin-pinging --count 10 --key-prefix=example --host x.x.x.x pi

機械学習（ML）や人工知能（AI）には何となくかっこいいイメージがある。ただ「その開発はとても泥臭いもの。そして、新しい分野だけに、従来のソフトウェア開発のアプローチとは別の考え方をする方がうまくいくのではないか」――2019年8月29～31日に開催された「builderscon tokyo 2019」のセッション「われわれはいかにして機械学習プロジェクトのマネージメントをすべきか」で、はてなの粕谷大輔氏（@daiksy）が登壇。主に、サーバ管理／監視サービス「Mackerel（マカレル）」のディレクターとしてML技術の開発に携わった経験を踏まえながらML技術の開発における「不確実性」のマネジメント術を説明した。 「ソフトウェア開発のマネジメントとは、不確実性の制御である」と、粕谷氏が指摘するように、ソフトウェア開発はさまざまな不確実性をはらんでおり、予想通りに進捗（しんちょく）することは

2019.08.28 ｜ Writer：とりとり クラウドの運用にMackerelを使ってみた はじめまして。2019年6月28日に申込開始となりました「クラウド導入・運用サービス」の企画業務をしております、とりとりと申します。 NTT東日本の提供する「クラウド導入・運用サービス」では、株式会社はてなの「Mackerel」を利用してお客さまクラウド環境の監視・保守業務を行っております。複数回に分けて、「Mackerel」の各種機能に触れながら、「クラウド導入・運用サービス」のご紹介ができればと思います。 第1回：アカウント開設～インストール 第2回：サービス・ロールの設定～通知設定 第3回：プロセスやログ等の詳細監視設定 第4回：ネットワーク死活監視設定 第5回：AWS/Azureインテグレーション機能を使ってみる 第6回：今度こそAzureインテグレーション機能を使ってみる サーバ監視サ

株式会社はてな（代表取締役社長：栗栖義臣／本社所在地：京都市中京区）は、東日本電信電話株式会社（代表取締役社長：井上福造／本社所在地：東京都新宿区／以下、NTT東日本）が2019年6月28日より提供を開始する「クラウド導入・運用サービス」において、当社のサーバー監視サービス「Mackerel」が採用されたことをお知らせします。監視サービスとしてのパートナーシップは「Mackerel」が第一号になります。当社は、NTT東日本とともに「クラウド導入・運用サービス」の顧客に対する運用プロセスの効率化に貢献してまいります。 ▽ サーバー監視サービス「Mackerel（マカレル）」 https://mackerel.io/ 当社が提供する「Mackerel」は、サーバーにおける各種ハードウェアやアプリケーションソフトウェアの性能をリアルタイムに監視することができるSaaS型サーバー監視サービスです。

Machine Learning Casual Talks #10での登壇資料です https://mlct.connpass.com/event/125316/Read less

はてなに入って1年がすぎました。 最近、ここ1年くらいでやってきたことをきちんと記録としてアウトプットしておきたいな、というモチベーションが出てきたので、つらつらとブログに残していこうと思っています。 徒然なるままにまとめているので、情報が足りないところやはしょられているところが出てきてしまいそうな気がしますが、質問などはSNSなどから直接いただけたらうれしいです。 はてなのCREでは、カスタマーサクセス担当というような雰囲気で仕事をしている私ですが、ここではそこに至った経緯のようなところを簡単にまとめてみました。 Mackerel のCREでは今、自分たちの仕事を4つの軸で表現しています。 ちなみに、これはあくまで"今"そうなっているだけなので、これからチームやプロダクトの状況によっては変わっていくことももちろんありえます。 カスタマーサクセス テクニカルサポート テクニカルアシスト テ

Sesame というスマート鍵を購入し、より快適な生活が手に入りました。 セサミスマートロックを買った また、 Sesame の API を試してみました。 Sesame API を試す 次の段階として、鍵の状態を Mackerel で監視してみます。 ※念のため補足すると、公式アプリでも鍵の施錠/開錠を検知したら push 通知することができるので、必要最低限の監視はできていると言えます。 なぜ監視するのか ちょっと話が横道に逸れますが、スマート鍵の導入に興味がありつつためらう理由の一つに、セキュリティが挙げられるんじゃないかな、と思っています。特に「不具合や誤作動で知らないうちに解錠される可能性があるんじゃないか」「クラッキングされて解錠されてしまうことはないのか」という点が不安に思われるんじゃないかな、と思います。 個人的には不具合で解錠されてしまう可能性より、うっかり鍵を閉め忘れて