はてなブックマーク

Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article?

Amazon SES はクラメソさんの初期構築の記事が充実してたり、オンプレなら Postfix 立ててな太古の記事がいくつも見つかりますが、 Mailgun や SendGrid の記事のググラビリティが低いように思いました。なので書いてみました。 私自身は、 自宅サーバーで Postfix & Dovecot を構築運用したことがある お仕事で Postfix リレーサーバー & Amazon SES にリレー を構築運用したことがある お仕事で Amazon SES から Mailgun に移行したことがある Mailgun以外の、SendGridとかMailChimpとか、お仕事では使ったことない くらいの人です。 Mailgun いいぞ 「いいぞ」を実感として持っているMailgunのいいところ。自前PostfixやAmazon SESとの比較を念頭に。 初期構築が簡単 アカウン

背景 RDSの停止ができるようになりましたが、停止してから1週間経過すると、ふたたび起動してきます。停止したのは、停止しておきたい理由があるから停止したのに、おまえ何で起動さした？ 毎週手作業でやるのも微妙。Lambdaでbotoするのを書くのもダルい。 CodeBuild で毎週実行させて awscli でやるのが究極に簡単でした。 buildspec.yml コンテナイメージは awscli が入るなら何でも良いです。作例では amazonlinux:2 を使っています。 version: 0.2 env: variables: RDS_NAME: "RDSインスタンス名" phases: install: commands: - yum install -y awscli build: commands: - aws rds stop-db-instance --db-instanc

みなさんDocker使ってますか。私は闇の深いEC2に阻まれて難しい状況です。闇を抱えたままDockerizeします。 闇が深いとは このくらいを指すものとします。 AMIの出所がわからない EC2インスタンスのAMI IDが、自前AMIになってる Linuxディストリはわかるが、起点にしたバージョンはわからない AMIがどうやってできたのかわからない sudo vi /etc/hoge.conf してるっぽい sudo yum install -y hoge してるっぽい wget https://~~~~/hoge.tar.gz から make install してるっぽい AMI更新手順がわからない 変更したい人々と、変更できる人々が違っている 実施できるのは、本番環境にSSHできる極少人数 簡単なはずのconfの変更も尻込みして進まない Dockerize & k8s移行とか盛り上

背景 IAMユーザーにMFA強制して、アクセスキーを発行すると、物事が煩雑になります。AWSによると以下のようにやる必要があります。 MFA トークンを使用して、AWS CLI 経由で AWS リソースへのアクセスを認証する方法を教えてください。 aws sts get-session-token が返してきたJSONを jq でバラして環境変数にセットするなど、ワンライナーで頑張りようはありますが、複数AWSアカウントにまたがると、かなり厳しいものがあります。 aws-mfa というPython製CLIツールを使うと、取り回しがかなり簡単になりますので紹介します。 つかうもの https://github.com/broamski/aws-mfa インストール手順 IAM の設定 IAMユーザーを作成します MFA強制します アクセスキーを発行します awscli の設定 さきほど発行し

本番RDSスナップショットをそのままテスト用に使うわけにいかない。個人情報とか業務上の機密とか。マスクします。みなさんどうやってるんですかね。 全体像 こんな流れで作ります。 create RDS Instance Data masking RDS create snapshot RDS instance shutdown この記事では 2. のところを扱います。ほかは手作業。そのうちawscliとCodeBuildで自動化する。 マスク設定ファイルをつくるのに必要な情報を用意する information_schema.tables, columnsを漁る テーブルそのものの要否をふりわける 必要なテーブルについて、マスクすべきカラムを選別する カラムごとに、どんなデータパターンでマスクするか決める マスク設定ファイルをつくる マスクツールは dbtestdata を使います。dbtest

いまさらEC2でOpenVPNサーバーなんて立てたくないんじゃ！という思いから調べたら作れました。こいつ、できるぞ....!! AWS Clinet VPNとは AWS謹製のフルマネージドのVPNサービスです。OpenVPNです。 AWS Client VPN とは - AWS Client VPN VPC 内に入る Client VPN エンドポイントを作る 作例が多々あるので割愛。こんな感じで。普通に作るとこうなります。 [AWS]踏み台をワンチャンなくせる！？VPC接続にClient VPNを使ってみよう ｜ DevelopersIO AWS Clinet VPNを分かりやすく解説してみる – サーバーワークスエンジニアブログ VPC 内からインターネットに出る Client VPN エンドポイントを作る Client VPNからインターネットに出るには Client VPNに、イン

背景 SSHして何かやる定形/不定形業務を廃止するのは、なかなか困難が伴います。 SSH接続を許可するか許可しないか、くらいしかできない いやまあ、Linux側でがんばってユーザー/グループを組めばいいんですけど 極少数のメンバーしか、保安上の理由から、許可できない 極少数のメンバーは、能力高しで多忙なのに、たいしたことないSSH作業に忙殺される 以前は、SSH定形業務をJenkinsジョブとして形式知化していましたが、 JenkinsのEC2インスタンスが SPOFとなる。単純に台数を増やせばいいものでもない。 闇のダンジョンとなりがち だからといって、今からJenkinsfileとかすごく頑張るのは、あまりに低い山の頂上を目指しているのではないか Jenkinsおじさんの雇用が生まれてしまう など問題がありました。このうち一部の問題について、CodeBuildジョブにすることで上手く扱

Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? 闇が深いとは このくらいを指すものとします。 AMIの出所がわからない EC2インスタンスのAMI IDが、自前AMIになってる Linuxディストリはわかるが、起点にしたバージョンはわからない AMIがどうやってできたのかわからない sudo vi /etc/hoge.conf してるっぽい sudo yum install -y hoge してるっぽい wget https://~~~~/hoge.tar.gz から make install してるっぽい AMI更新手順がわからない 変更したい人々と、変更できる人々が違っている 実

背景 複雑な歴史的経緯から、プライベートチャンネルで作ってしまったが、組織内の情報流通の観点から、パブリックチャンネルにしていきたい。が、Slackはプライベートをパブリックにすることができない。 また、様々な通知をチャンネル名でハードコードしていることも大変に多く、パブリックにするにしても、同名のまま転換していきたい。 制約 プライベートでのログを、パブリックに引き継ぐことはできません。 プライベートチャンネルがあります とりあえず無いので作ります。「hogehoge」です。 プライベートチャンネルをリネームします あとで過去ログ参照のため、無茶なリネームは避けたほうがよいです。今回は末尾に「-priv」を付けるリネームとしました。 チャンネルの歯車、その他のオプション。 ↓ ↓ 元々と同名のパブリックちゃんねるを作ります 元々の名前「hogehoge」としてパブリックチャンネルを作りま

Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article?

Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? CodeBuildとは AWSのなかでCI/CDを担うCode三兄弟のひとつ、という説明では一切何もわからなかったので、軽く触った理解をメモとして残します。 AWS CodeBuildは、Jenkinsジョブ相当のものを「Build project」と呼び、任意のDockerイメージを起動して、コンテナ内で任意のコマンドを起動できるサービスと理解しました。 私自身はCircleCIあるし時間の無駄でしょと思って敬遠してましたが、CI/CDという色眼鏡を外すと、活用の幅が非常に広い面白い製品です。使わないのはもったいない！ こんなことに使

背景 Excelにコピペするのは嫌でござる！LambdaもTerraformも書きとうない！Datadogならポチポチだけでできるはずだ！ https://qiita.com/search?q=aws+billing 準備が5つ必要です ポチポチだけでイケた。AWSとDatadogすごい。神。 準備1: AWSでBudgetを作成する AWS請求ダッシュボードにある「Budget」で、雑でも何でもいいので、「予算を作成」してください。もうあるなら、この準備は飛ばして大丈夫です。 作成が必要な理由は、Datadogは、Budget経由でBillingのデータを吸い出しているため、Budgetがとにかく存在してないと始まらないのです。 ちなみに予算を作ったところで、予算を超えると何も動かなくなるとか、予算の金額を毎月必ず請求されるとか、そんなことは一切ないです。AWSからの請求に対して、予算と

ブクログは非常に良いサービスなのですが、Kindle書籍の登録に難があります。ブックマークレットがあったり、ブクログ側で、書籍を探して登録すれば登録されます。 しかし求めているのはそういうことじゃないのです。 購入したら、抜け漏れなく自動で登録されてほしいし、過去に購入した書籍も全部登録したい。ひとつも例外なく。すべてです。 今後の購入分 Kindleの購入メールを、HTML形式でメールを送ってもらうように設定します。 HTML形式なら、Kindle書籍へのURLを含んでいて、URLからASINを切り出すことができるためです。テキスト形式だと、注文履歴へのURLまでで、ASINを切り出せません。 設定は、Kindle購入メールの下端に「 HTML形式でのEメール配信をご希望の場合は、以下のURLから設定を変更してください」というのがあるので、リンク踏んで設定。 以下記事を参考にGASを設置

CI いちおうJenkinsが立ってました。失敗して赤くなってるジョブが大半で、かといって誰が治すわけでもなく、よくわからないけど失敗したり成功したり、とにかく不安定でした。 CloudWatchのメトリクスで眺めて、EBSのIOPSクレジットの枯渇から激遅になって、Jenkinsジョブのタイムアウト設定で失敗になる、まで明らかにしました。その時の対処は、IOPSクレジット上限サイズの1TBのSSDのEBSを付けることと、同時並行で動けるJenkinsジョブ数に上限を設けることで、落ち着くようになりました。 とはいえ「Jenkinsおじさん」問題があるので、CIをどうにか民主化する必要があります。SaaSから検討して、TravisCIとCircleCIが最終候補になって、トラブルシュートをSSHでできるのを決め手に、CircleCIを導入しました。 8月末にCircleCI1.0が死んだと

tl;dr coggleはいいぞ google driveに保存すれば、 リアルタイム共同編集 privateファイル数は無制限 PDF、PNG、テキストダンプ、mm形式、でエクスポートできる というのが無料でできる この記事は coggleにサインアップして、googleドライブで新規作成できるようにする coggleにサインアップ Googleアカウントで認証。 coggleに戻ると、プラン選択を迫られます。Freeで始めるので、右上の「x」。 google driveに保存できるようにする 左上の、自分の名前をクリックして、「Link Google Drive」 google driveで、coggleファイルを新規作成できるようにする 新規 -> その他 -> アプリを追加 検索ワードは「coggle」。でてきたcoggleを新規追加。 新規 -> その他 -> coggle で、

Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article?

Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? CloudFrontとは 台数不明で性能不明ですが、グローバルに配置された、キャッシュサーバー。 効果 CloudFrontをリバースプロキシキャッシュとして立ててみました。お問い合わせページなど動的ページを除いて、ほぼ全部のリクエストをCloudFrontが捌いてくれてます。 ※効果には個人差がございます 課金ポイント 料金 - Amazon CloudFront | AWS データ転送料金 キャッシュクリア料金 1ファイル1回クリアが、月間1000回までは無料。以降は0.005 USD リリースとかでこまめに大量のファイルをクリアす