CloudRun

株式会社ヘンリーでSREなどをやってる戸田（id:eller）です。弊社サービスはBackend for FrontendとしてApollo Serverを採用しています。 先月まではApollo Server v3を利用していましたがEOLが今年の10月に迫っていたため、v4へのアップグレードを実施しました。この記事では移行時に実施したことをご紹介いたします。 なお公式ドキュメントに主な変更点がまとまっていますので、類似の作業を予定されている方はそちらをまずご確認ください。 GraphQL関係の依存を更新する Apollo Server v4は graphql 16.7.0以降の利用を推奨し…

3行まとめ CloudRunはX-Forwarded-Forを上書きしてクライアントのIPアドレスにしてしまう User - CDN - CloudRun としている場合、X-Forwarded-Forの値はCDNのIPアドレスになってしまう 解決策はCDN独自のヘッダーを付与してアプリケーション側で読むしか方法がなさそう X-Forwarded-For X-Forwarded-For というヘッダーがあります。多分MDNを見るのが一番早いですが、色々なプロキシを通ってオリジンに到達するようなサーバー構成のときにクライアントのIPアドレスをうまく伝えるようなヘッダーです。 developer.…

個人でWebサービスを開発したいけど、どのような流れで作っていけばいいのかわからない方向けです。個人開発でWebアプリを開発、デプロイをしたのでその流れを共有したいと思います。 作ったもの 麻雀戦績管理アプリ名付けて「PungPals」。雀荘などのオフラインでの対戦結果を残し、個人成績やランキングを確認できます。 pungpals-service-xstpolfd4q-an.a.run.app 開発とデプロイの流れ 1.要件定義、設計 実装がスムーズに進むために、しっかりとしておきましょう。以前記事を書いたので、参考にしてください。 kechigon.hatenablog.com 2.技術選定…

弊社では、バックエンド側のシステム作成の際には主に Google Cloud Platform (GCP) を利用しています。 その中でも簡単な設定でAPIサーバーを作ることができる Google App Engine (GAE) をよく使っているのですが、Cloud Run でも同様にオートスケーリングされるサーバーを簡単に作ることができるので、その方法をまとめます。 Cloud Run とは 詳細は公式サイトを見るのが一番かと思います。 cloud.google.com すごくざっくりいうと、以下の特徴があります。 Docker とかのコンテナを実行できるサービスです サービス (サーバー…

はじめに こちらは バイセルテクノロジーズ Advent Calendar 2023 の18日目の記事です。 昨日は佐々木さんによるCodeDeployを使ってデプロイの仕組みを入れ替えた話でした。 こんにちは、開発2部の富澤です。 バイセルでは店舗買取システムStoreの開発しています。 Storeではチームメンバーの増加によって、フロントエンドの動作確認環境の数が不足しておりました。 その結果、コードレビューにかなりのコストがかかるという課題がありました。 この課題を解決するため、 プルリクエストごとに動作確認用の実行環境を立ち上げる仕組みをCloud Runを利用して作成しました。 今回…

はじめに こちらは バイセルテクノロジーズ Advent Calendar 2023 の6日目の記事です。 昨日は馬場さんによるCloud Run ジョブのオーバーライドで実現した単発処理群管理のための快適な環境でした。 こんにちは。開発2部の小松山です。 2023/08/14にCloud RunからVPCネットワークに直接トラフィックを送信できる機能 (以後Direct VPC Egressと表記) がプレビュー版でリリースされました。 cloud.google.com 私の所属するプロジェクトではAPIサーバを構築するのにCloud Runを大いに活用しており、VPC接続が必要な通信経路も…

Cloud Runで何かのアプリをデプロイする時にはコンテナイメージを作ったり、githubと連携したりする必要がある、と誤解していましたが、デプロイコマンドの--sourceオプションを使用することでローカルのソースからデプロイまで可能という記事を読んで、自分でも試してみました。 手順 検証用のアプリ作成 アクセスするとJSONを返却するだけの検証用APIサーバを作成します。 main.go package main import ( "encoding/json" "log" "net/http" "os" ) type Hello struct { Title string Desc s…

TL; DR Streamlitを用いたWebアプリの基盤の開発・運用をしている。 社内アプリ開発者用に用意しているMarkdownをGoogle CloudとGithub ActionsおよびMkDocsを使って開発ガイドとして公開した。 自己紹介 NTTドコモ データプラットフォーム部（以下DP部）黒須です。 我々のチームではStreamlitを用いたWebアプリ基盤の開発・運用をしております。（以下の記事を参考） nttdocomo-developers.jp 社内アプリ開発者用に環境構築からアプリデプロイまでの実施方法をMarkdownでまとめており、MkDocsとCloud Runを…

こんにちは、トレタVPoEの北川です。 今回はトレタの開発組織で行っている監視業務（オンコール対応）について紹介しようと思います。 監視業務（オンコール対応） トレタでは飲食店向けにサービスを提供しているため、飲食店の営業時間である深夜や土日祝にもシステムが利用されています。そのためトレタの営業時間外でも安定してサービスを提供できるように監視体制をつくり運用しています。 オンコールとは、システム障害が発生した際にオンコールの担当者が対応できるように待機する業務です。当番の担当者は障害発生時に障害状況の確認や各所への連絡を行います。 トレタではPagerDutyというサービスを使い、事前に定めた…

仕事でDataflowを使ったデータ分析基盤を開発していたんですが、数千万件のデータを処理できるか負荷テストしていたところジョブの実行詳細に「ストラグラーが検出されました」というメッセージが出てジョブがPENDする現象が起こりました。 その際に調べたり試したこと書き残してみます。 負荷テストでは CloudStorageに保存されたjsonlを件数分BigQueryに登録するジョブ CloudRunを使ってデプロイしたFlaskのHTTPサーバにリクエストを送ってレスポンスをBigQueryに登録するジョブ の2パターン実行したのですが単にjsonlを書き込むジョブのテストは問題起こらず、20…

terraformを使っていたら誰もが意図しない差分と格闘したことがあるはず。 その中でも特に何度applyしても差分が消えず残り続けるものがある。このようなdiffのことを permadiff と呼ぶ。 googlecloudplatform.github.io permadiffについての解説はMagic ModulesというGoogle Cloud向けproviderのコード生成器におけるドキュメントで取り上げられている。このためどちらかというとGoogle系のエコシステムの中で用いられる用語かもしれない。 実際、terraform-provider-google ではpermadiff…

背景：IoT Platformの評価として、ThinsBardを使いたい。ThinsBoardを無料で使うには、自分でサーバを仕立てる必要あり。ちょっと試すだけならGCPの無料サービス枠があり、Cloud Runを使えばDockerコンテナも走らせられる 課題：Cloud Runを使ったことがないので、python+flaskの組み合わせでDockerイメージを作って Cloud Run上で走らせてみる 結論：python+flaskによるWebServer用コンテナは稼働できた詳細:(前提) Regionはasia-northeast1を使います。また、Ubuntu環境にgcloud CLI…

困ったこと Cloud Runで動かしてるアプリが、どうしても途中で止まっちゃう問題に直面しました。時間がかかる処理をすると、途中でタイムアウトしてエラーが出てくる、、 考えうる原因 まず、Cloud Run側のタイムアウト設定。Cloud Runはデフォルトでタイムアウトが5分。 次に、アプリのサーバーとして使ってるGunicornの設定。というのもCloud Runのログを見ると下のようなエラーが出てます。 [CRITICAL] WORKER TIMEOUT Cloud RunのドキュメントによるとGunicornの設定でタイムアウトを延ばせとのこと。 [CRITICAL] WORKER …

G-gen の佐々木です。当記事では Cloud Run のマルチリージョンサービスについて解説します。 マルチリージョンサービスとは メリット サービスのレイテンシ低下 リージョン障害への耐性 各リージョンへの一括デプロイ 注意点 利用料金 構成は全リージョン一律 利用手順 マルチリージョンサービスの作成 マルチリージョンサービスの更新 ロードバランサのバックエンドにマルチリージョンサービスを設定 マルチリージョンサービスとは マルチリージョンサービスとは、一度の操作で複数リージョンに Cloud Run サービスをデプロイすることができる機能です。 Cloud Run は通常、サービスのデ…

DjangoをCloud Runにデプロイした時のメモ。 以下の記事を参考にしました。 Cloud Run での Django | Google Codelabs 今回はSQLiteを使用しているためCloud SQLは除外しています。 また、SQLiteは別で設定予定のため今回の作業には含まれません。 Cloud API を有効化 gcloud services enable \ run.googleapis.com \ cloudbuild.googleapis.com \ secretmanager.googleapis.com \ artifactregistry.googleapis…

0. はじめに 1. GCPベースでのマイクロサービス全体設計 マイクロサービス基盤においてGCPを選定する理由・観点 マイクロサービスアーキテクチャとはどういうものか マイクロサービスの設計観点 マイクロサービス設計で意識すること GCPにおけるマイクロサービス実装パターンについて マイクロサービスにおけるシングルテナントとマルチテナント どこまで共通化・標準化するのか？ GCPにおけるポリシーコントロール GCPにおける標準ライブラリの実現について 2. UX/UI (Webアプリ、モバイルアプリ) 2.1. Webアプリ UX/UIのビジネスロジックをバックエンドに寄せる必要性 SPAか…

2024/9/21 https://tokyo.serverlessdays.io/2024 https://serverless.connpass.com/event/325659/ 感想 運営の方からお願いのあったフォーマットで ①今日1番良かったセッションと良かったポイント 毎日放送の野球中継の話が1番良かった ユーザとして身近な内容なのでそそられたし、技術面の話も選定の流れなど面白かった 土曜朝からで眠気もあったがこれだけは最後まで聴き入ってた 他には生成AI関連はこれまで接点がなかったから知識が増えてよかった ②自分のプロジェクトで今度TRYしてみよっかなと思ったサーバーレスな施策・…

はじめに 今回はterraformを利用してCloudRunを構築しminimal API(ASP.NET Core + .NET 8)で構築したWebサーバーをデプロイする方法を紹介したいと思います。具体的には以下の操作をしていきます。 terraformによるCloud Run構築 ASP.NET Coreによるプロジェクト作成 作成したプロジェクトを実行するDockerfileを作成 Artifact RegistoryにDocker Imageをアップロード はじめに Cloud Runの構築 Cloud RunにアクセスできるURIを出力する その他のterraformコード サイト…