AWS lambda

AWS Lambdaのコールドスタートはアプリ開発でしばしば悩まされる問題です。この記事では、特にPythonのLambda関数 (コンテナも含む) において、コールドスタートが遅い際の対処方法をいくつか紹介します (注意: 網羅は目指してません)。 第一歩: 計測する Pythonプログラムのコールドスタートが遅い場合、モジュール群のインポートに時間が掛かっていることが多いと思います。 モジュールのインポートに要する時間は次の方法で計測・可視化できます。 まず、-X importtime オプション付きでPythonプログラムを実行します。Lambda環境そのもので実行する*1のはログの取得…

小西秀和です。 「歴史・年表でみるAWS全サービス一覧 －アナウンス日、General Availability(GA)、AWSサービス概要のまとめ－」から始まった、AWSサービスを歴史・年表から機能を洗い出してまとめるシリーズの第8弾です(過去、Amazon S3、AWS Systems Manager、Amazon Route 53、Amazon EventBridge、AWS KMS、Amazon SQSについて書きました)。 今回は2014年11月にアナウンスされたサーバーレスでフルマネージドなコード実行サービスを提供するAWS Lambdaについて歴史年表を作成してみました。 今年2…

前回記事に引き続き、AWS Step Functions がテーマです。 （2024 年 6 月に検証した内容に基づいています。） AWS Step Functions のステートマシンは、様々な AWS サービスと連携できます。 例えば、AWS Lambda 関数を呼び出したり、Amazon SNS のトピックにメッセージを発行したり、Amazon DynamoDB のテーブルに項目を Put することも可能です。 この連携のことを 「統合 (integration)」と呼ぶこともあります。 この統合には、最適化された統合 と AWS SDK サービス統合 の 2 種類があるとドキュメントに…

dockerコンテナ上のアプリをAWS Lambda上で呼び出すには、awslambdaricというのが必要なようです。 dockerイメージは以下のようになります。 # Define custom function directory ARG FUNCTION_DIR="/function" FROM --platform=linux/amd64 python:3.10-slim-bullseye ENV TZ="Asia/Tokyo" # Include global arg in this stage of the build ARG FUNCTION_DIR # Install aws…

（※Serverless Framework V.3を想定しています） Docker Imageでデプロイする LambdaへのImageデプロイ ServerlesでのImageデプロイ API Key認証 エンドポイントのタイプを変える Docker Imageでデプロイする LambdaへのImageデプロイ LambdaはDocker Imageを使ってデプロイすることができます（Lambda のコンテナイメージを使用する - AWS Lambda）。 pip installでいれるサードパーティーのパッケージが必要なときやストレージ上のファイルを同梱してデプロイしたいとき、Image…

はじめに こんにちは。 AWSとTerraformの仕事と個人学習で、LocalStack を使っています。 今回は、勉強したことの振り返りです。 ※本記事では、Terraformなどのツールの解説はしません。 構成 今回構築したのは、以下の構成図のようにS3にファイルをアップロードしたらLambdaを実行するシンプルなものです。 ソースコードは以下になります。 github.com 構築 Gitクローンします。 git clone https://github.com/44taka/study-localstack.git LocalStackのコンテナを起動します。 docker comp…

はじめに エーピーコミュニケーションズGLB事業部Lakehouse部の鄭(ジョン)です。 この記事ではFivetranのAWS Lambdaコネクターを利用して、データをDatabricksに送信する方法を紹介いたします。 今回使ったデータ送信方法は、S3経由方法です。 検証は、以下のFivetran公式ドキュメントを見ながら進めました。 fivetran.com Fivetranでは、コネクタを使って多様なデータソースに対応できます。 概要は、以下の記事をご参考ください。 techblog.ap-com.co.jp Fivetranを利用すれば簡単かつ迅速に多様なソースのマイグレーションが…

Lambda 実行環境のライフサイクルを理解する - AWS Lambda Lambda関数は実行環境（Execution Environment）で呼び出され、Runtime APIを通じてLambdaと通信する。 拡張機能（Extention）は、Extention APIを使ってLambdaと通信する。拡張機能はTelemetry APIを通じてログやメトリクスを取得できる。 Lambda 実行環境のライフサイクル Initフェーズ Init フェーズは 10 秒に制限されている。 Initフェーズ中の失敗 INIT_REPORT ログにエラー情報を出力する。 Initフェーズ成功 sn…

こんにちは！サービス開発部の布施です。 本記事はterraform アドベントカレンダー12日目の記事になります！ 私は普段、Cloud Automatorというwebアプリケーションの開発を行っています。しかし、つい最近は社内システムの新規開発プロジェクトを担当しており、インフラはterraformを使って構築しました。本ブログではその道中、for_eachを使った体験談とそこで出会ったterraformの仕様のことを書いていきます。 なお、ブログ執筆時のterraformのバージョンは1.9.7です。 for_eachなんぞや？ for_each使う？使わない？ なにをfor_eachに渡…

最近アーキテクチャレビュー会をしているときに「そういえば Amazon S3 Object Lambda ってあったな〜」という話になった😀 Amazon S3 Object Lambda は 2021年にリリースされてて，リリース直後に試した記憶はあるけど最近は使う機会がなかったな〜と思って，復習も兼ねて試してみることにした． docs.aws.amazon.com 探したら楽しそうなチュートリアル「Using Amazon S3 Object Lambda to Dynamically Watermark Images as They Are Retrieved」があったのでやってみた❗️…

こんにちは。テクニカルサポート2課 の めぐろ です。 前回の申込編では、NTTコミュニケーションズのフリーダイヤルに Amazon Connect の 050番号を着信番号として追加出来たところまで確認しました。 今回は実際に発着信させて挙動を確認してみたいと思います。 blog.serverworks.co.jp はじめに フリーダイヤルからの着信 話中時迂回の挙動確認 話中時迂回とは LS話中になるのか 話中時迂回の確認 話中時迂回が発動する条件 発信時による特定番号通知確認 工事タイミングについて 注意事項 まとめ はじめに 本記事は主に以下の挙動について確認した結果を記載しています。…

こんにちはこんにちは。技術基盤グループの Shia です。開発の妨げになるものを排除していく仕事をしています。 入社してからいろんなことをしてきてますが、本日は年末ということで STORES ネットショップの ECS 移行時で作ったバッチ基盤の話とともに当時の技術決定を振り返ってみようと思います。読み手のみなさんにとっては ECS 環境でこういう感じのバッチ基盤もあるんだな〜とか、 Step Functions 便利そうだな〜とか感じてもらえれば幸いです。 STORES Advent Calendar 2024 9日目の記事です。 入る前に: この記事でのバッチは定期的にスケジュールされて実行…

初めに こんにちは、やしきんです！ こちらはSORACOM Advent Calendar 2024の12日目の記事になっています🌟 他にも素敵な記事がいっぱい掲載されていますのでぜひ以下のリンクからアドベントカレンダーをご覧ください👍 qiita.com 今回はSORACOM LTE-M Button for Enterprise（白ボタン）と AWS Lambda を利用してDiscordのチャネルに帰宅通知を送るれるようにしてみました。 ざっくり手順 SORACOM Funkと連携したAWS Lambdaでデータを受け取れる簡単なコードを実装 DiscordのWebhookを作成する D…

目次 目次 はじめに こんな方におすすめ 参考情報 実践① ワークフロー全体像の作成 新規作成画面から AI 利用画面へ AI 利用画面でプロンプトを入力 作成されたワークフローの確認 AI で出来なかったこと 実践② JavaScript のコード作成 おわりに はじめに こんにちは！クラウド事業部の野村です(*ﾟｰﾟ) Datadog には、 Workflow Automation というワークフロー機能があります。 モニターをトリガーにしたり、1日1回などのスケジュールを設定して開始でき、さまざまなクラウドやサードパーティアプリへのアクションも用意されているので、柔軟に利用できそうな機能…

こんにちは。Feature2 Unitのうなすけです。我々のチームの担当範囲のひとつには「データの入出力」というものがあり、お客様からAPI呼び出しやファイルアップロードなどで受け取ったデータを適切に処理するコンポーネントの運用・開発をしています。 AWS Lambdaの処理が失敗するようになった 皆さん、AWS Lambdaはお使いでしょうか。我々も様々な処理にAWS Lambdaを活用しています。一例として、ユーザーからアップロードされたCSVファイルのバリデーションを行うLambda functionをAWS Step Functionsの一部として実行しています。 ある日、機能追加とし…

こんにちは！TECH Street編集部です！ 2024年9月25日（水）に開催した、 「LLMアプリ開発エンジニア勉強会」のイベントレポートをお届けします。今回は3社のアプリケーション開発に携わるエンジニアが集まり、それぞれの知見を発表し、学びあう勉強会を開催します。 登壇者はこちらの方々！ Seiya Umemoto／パーソルキャリア株式会社 リードエンジニアSaito Taishi／個人事業主 エンジニア有馬三郎／セゾンテクノロジー 執行役員 CTO 早速、内容を紹介いたします！ 月間4000人以上の社内利用を達成したRAG搭載LLMチャットアプリの機能改善の取り組み 目次 はじめに 社…

こんにちは、ギフティでエンジニアをやっている中屋(@nakaryo79）です! はじめに ギフティではプロダクトのほとんどが Ruby on Rails を使って書かれています。 RubyKaigi のスポンサーや Gotanda.rb の会場提供も行っており、Ruby 界隈では弊社のことを知っていただいてる方も増えてきたのではないでしょうか。 それと同時に、Ruby の会社だよね、というイメージを持たれている方も少なくないかもしれません。 しかし、弊社ではビッグモノリスで一つのシステムを開発しているわけではなく、事業やプロダクトごとにそれぞれシステムを分けて構築しています。 その9割以上は確…

こんにちは。インシュアランス本部ソリューション部の照屋です。 今年、JMDCではアドベントカレンダーに参加しています。 qiita.com 本記事はJMDCアドベントカレンダー 11日目の記事 になります。 はじめに 私の所属するインシュアランス本部では、JMDCの保有する医療ビックデータを活用したヘルスケアコンテンツを企画・開発し、生損保領域のお客様に対して提供しています。 お客様に提供しているコンテンツの代表例として、健康診断の結果からカラダの年齢を測る「健康年齢®」や、実施しやすく・継続しやすく・効果のある健康改善タスクをレコメンドする「Health Habit®」などがあります。 本記…

小倉智昭さんが死去 77歳 フジ「とくダネ！」などキャスターとして活躍 長く闘病生活も力尽きる - スポニチ Sponichi Annex 芸能 シリア・アサド政権の「絶滅収容所」から大勢の人々が解放される→収容者の中には「アサドはフセインに負けたのか！？」と時代錯誤に陥っている人も アニメ「タコピーの原罪」公式サイト｜TBSテレビ 良いコードレビューとは [第12話]限界OL霧切ギリ子 - ミートスパ土本 | 少年ジャンプ＋ [その54]放課後ひみつクラブ - 福島鉄平 | 少年ジャンプ＋ [9話]サンキューピッチ - 住吉九 | 少年ジャンプ＋ [第176話]ダンダダン - 龍幸伸 | 少…