はじめに カミナシでソフトウェアエンジニアをしている Taku(X アカウント)です。 カミナシではプロダクトのインフラに AWS を利用しているのですが、その学習の一環として AWS が主催するイベントに業務時間を利用して参加させていただいてます。 今年は AWS Jam / GameDay というイベントに計3回参加してみて、学びが多いイベントと感じたため共有させていただきたいと思います。 参加したイベント 2024/6/20：AWS Jam（in AWS Summit Japan） 2024/6/21：AWS GameDay（in AWS Summit Japan） 2024/8/26：AWS AI GameDay イベントの内容についてはネタバレ防止で公開不可のため、本記事には技術的な細かい話は出てきません。 その分ライトに読めると思うので、聞いたことがあるけど参加したことがないと

11月26日、Sysdigが「26のAWSセキュリティベストプラクティス」と題した記事を公開した。この記事では、AWS環境で採用すべき主要なセキュリティベストプラクティスについて詳しく紹介されている。以下に、その内容を簡潔にまとめて紹介する。 11月26日、Sysdigが「26のAWSセキュリティベストプラクティス」と題した記事を公開した。この記事では、AWS環境で採用すべき主要なセキュリティベストプラクティスについて詳しく紹介されている。 以下に、その内容を簡潔にまとめて紹介する。 AWSセキュリティの基本 記事の冒頭では、AWSのセキュリティを強化するための基本的な概念が説明されている。特に「AWS共有責任モデル」に焦点を当てており、AWSが提供するインフラのセキュリティ管理と、顧客が自身のデータやアプリケーションを守る責任の分担が明確にされている。 26のAWSセキュリティベストプラ

はじめに ソーシャル経済メディア「NewsPicks」SREチーム・新卒エンジニアの樋渡です。今回は、AWSサービスである「Lambda」「CloudFront」「S3」を用いて、弊社で使用している社内向けシステムの基盤を再構築し、開発者体験の向上やセキュリティ対策を行なったお話です。 お話の内容 弊社で使用している社内向けシステムの一つに「Watson」というシステムがあります。「Watson」とは簡単にいうと「NewsPicks」のユーザーIDをもとにユーザーごとの情報を検索・閲覧できるシステムで、お客様からの問い合わせ対応等に活用される重要なシステムです。「Watson」は構築されたのが８年前と歴史が古く、歴史が古い故に数々の問題を抱えていました。今回のお話では、歴史の古い社内システムのインフラとバックエンドを更改し抱えていた問題を解決したぜ！というお話となっています。 抱えていた課

はじめに 私は2024年1月からAWS設計構築のプロジェクトに入り、現在設計を進めている真っ只中なのですが、プロジェクトにアサインされてからの気づきについて書き留めてきたいと思いましたので本記事を執筆いたします。 まず、結論ファーストでお話させていただきますが、タイトルの「AWSエンジニアにとって必要な知識」についてはIT全般の知識を7割程度把握 しておくのが自分的ベストプラクティスかと思います。 ある知識に特化しているよりも、全体的に網羅されている方がことAWSにとっては必要な要素ではないかと考えています。 なぜなら、設計において任されるタスクは自分の得意としていない分野においても任されるからです。 ではその全体の知識って具体的にどんなことを知っておいたら良いの？について紹介していきます。 Linuxの知識 言わずもがな、Linuxの知識は必須になってきます。 前提として設計段階でEC2

始めに 対象者 作成するアプリケーション構成 運用を見据えた構成とは 構成概要 各スタックの説明 ① SampleInfrastructureStack ② SampleContainerRepositoryStack ③ SampleTaskDefinitionStack ④ SampleServiceStack ⑤ SampleServicePreferenceStack ⑥ SamplePipelineStack 動作確認 正常にデプロイが完了する場合のCodeDeployの挙動 ロールバックが発生する場合のCodeDeployの動作 終わりに 始めに バックエンドの com です。 テックタッチでは Blue Green Deployment 構成の ECS クラスタを、AWS CDK によるコードで管理しながら本番運用で使っています。 ECS Blue Green Deploym

はじめに AWSの豊富なサービス群を活用することで、高可用性かつ高スケール性を実現するシステムを構築することが可能です。 しかし、クラウドサービスの特性を最大限に活かすためには、適切なデザインパターンを理解し、実践することが重要です。そこで今回は、AWSを利用して「高可用性」かつ「高スケール性」を実現するための代表的なクラウドデザインパターンを紹介します。 1. EC2インスタンスを利用した動的コンテンツの配信 動的コンテンツとは？ 動的コンテンツとは、ユーザーのリクエストに応じて生成されるコンテンツのことを指します。たとえば、ユーザーのログイン状況や入力内容に基づいて異なるページを表示するようなケースです。 AWSサービスの簡単な解説 Amazon EC2 (Elastic Compute Cloud): スケーラブルなコンピューティングリソースを提供するサービスです。必要に応じて、イン

こんにちは。エムスリーエンジニアリンググループのコンシューマチームに所属している園田です。 普段の業務では AWS やサーバーサイド、フロントエンドで遊んでいるのですが、最近はもっぱら OpenAI や Claude3 で遊んでます。 今回は、最近巷で話題の LLM ローコード構築ツールである Dify の OSS 版を AWS のマネージドサービスのみを使って構築してみました。 DifyとはオープンソースのLLMアプリ開発プラットフォームで、様々なLLMを使用してChatGPTのGPTsのようなものがノーコードで簡単に作れます。 引用元: DifyでSEO記事作成を試してみる｜掛谷知秀 試しにAskDoctorsのガイドラインHTMLをナレッジ登録してみた ローカル環境で Dify を構築する記事はたくさん見かけますが、AWS のマネージドサービスで構築する内容は見かけなかった*1ので公

はじめに 初めまして！ソーシャル経済メディア「NewsPicks」SREチーム・新卒エンジニアの樋渡です。今回は「AWS Security Hub」と「Slack」を用いて、弊社で利用しているAWSリソースの監視運用を効率化したお話です。 お話の内容 年々増加するサイバー攻撃に対抗するため、セキュリティ対策は日々重要度が増してきています。 そこで弊社で利用しているAWSのリソースに対して、各種セキュリティイベントの収集ができるAWS Security Hubを利用することで、セキュリティ状態の可視化と迅速な対応がしやすい運用を行い、セキュリティ状態の現状把握から始めることにしました。特にNIST CSFの「検知」部分の運用について整備した内容となっています。 NIST Cyber Security Frameworkについて 皆さん、「NIST Cyber Security Framewo

「Amazon Q Developer」正式サービスに。AIがAWSの専門家となり、設計、コーディング、テスト、トラブルシュートなどを支援。Freeプランも Amazon Web Services（AWS）は、AWSにおける設計、コーディング、テスト、トラブルシュートなどの場面でAIが開発者を支援する新サービス「Amazon Q Developer」の正式サービス化を発表しました。 Amazon Qは昨年（2023年）に開催されたイベントAWS re:Invent 2023で発表された、AWSによる生成AIサービスです。 Amazon Qは、マイクロソフトのCopilot対抗と位置づけることができます。 Copilotが、開発者向けのGitHub Copilot、Office向けのCopilot for Microsoft 365などさまざまな分野で展開されているように、Amazon Qも

WAFで困るのは「直して」と言えないこと 清野隼史氏（以下、清野）：ここからはもうちょっと現場レベルまで踏み込んでいきます。その中でも特にWAFのところにフォーカスをしてエピソードを聞きたいなと思います。このトピックでは、AWSの運用で現場が抱えている課題みたいなところを聞きたいなと思っています。こちらも佐竹さんに聞いてもいいですか？ 佐竹陽一氏（以下、佐竹）：はい。「AWS WAF」もしくは「WafCharm」を使っているという視点で話します。先ほど臼田さんが「Security Hubを使っている方」というアンケートをして、半分ぐらいの方が手を挙げられたことに「そんなにいるの!?」とむしろちょっとビックリしています（笑）。 （一同笑） 「意識高!!」と思ったんですけど（笑）。こういう課題は、もしかしたら現場の方も持っていると思います。 セッションの1個目のところでBookLiveさんが「

本日、Amazon Kinesis Data Streams では、Amazon Managed Service for Apache Flink を使用して、AWS マネジメントコンソールからワンクリックで SQL クエリを実行できる機能を追加しました。この新機能により、ストリーム内のデータをリアルタイムで簡単に分析して可視化できます。 Amazon Kinesis Data Streams は、大規模のストリーミングデータを簡単にキャプチャ、処理、保存できるサーバーレスストリーミングデータサービスです。Amazon Managed Service for Apache Flink では、データストリームを処理するためのオープンソースのフレームワークおよびエンジンである Apache Flink を使用して、ストリーミングデータをリアルタイムに変換および分析できます。今回のリリースにより

米ドル/円 が150円と計算しやすくなり、コスト削減の圧力が日々強まる中、皆様お宝探しと垂れ流し回収の真っ最中でございましょうか。 最近はコスト削減や予算について見ることが多いので、その中で出てきた面白げな話に雑談を加えてとりとめなく書いてみようと思います。 削減余地はある 昨年にご好評いただいた AWSコスト削減とリソース管理 | 外道父の匠 を含め色々な削減施策を試みてきましたが、サクッと成果になる箇所から泥沼に動かない所まで様々あったりします。 ただ、どんなアカウントでもトラフィックや処理負荷には波があり、それに対する余剰リソースを確保して構成しているので、その辺をキュッと絞ることまで含めればやれることは必ず一定以上存在することになります。 そういう大きなお宝ではない小さなお宝だと様々あり、古びたとか退職者が作ったとかで、ほぼ使っていない垂れ流しリソースやデータをかき集めれば、チリツ

クラウド市場シェア首位のアマゾン・ウェブ・サービス（AWS）で10月に開催された全社会議の文字起こしを、Business Insider編集部は独自ルート経由で入手した。 Arantza Pena Popo/Insider; Noah Berger/Getty Images 10月に開催されたアマゾン・ウェブ・サービス（AWS）の全社ミーティングでは、複数の経営幹部がほぼ2時間にわたって代わる代わるに発言し、従業員たちが成し遂げた直近1年間の業績を絶賛した。 同社はクラウド市場シェア首位の地位を不動のものとし、アマゾン（Amazon）の利益の大半を稼ぎ出す大黒柱に成長した。祝うべきことはいくらでもあった。 ところが、全社ミーティングも間もなく終了という質疑応答の場面で、ある従業員から彼自身を含む従業員の扱いに関する質問が飛び出すと、お祝いムードは一変した。 Business Insider

2023年のIT業界は完全に「生成AIイヤー」だが、この基調講演でも、もっとも時間を割いて解説されたのは生成AIについて。同社独自の企業向けチャット「Amazon Q」を中心とした発表が行われた。 生成AIといえば、日本から見るとOpenAIとマイクロソフトが大きくリードしており、AWSやGoogleなど他のクラウドインフラ・プラットフォーマーは出遅れている印象を受けるかもしれない。 AWSは今回、そのイメージを払拭しようとしている。彼らはどういうところから「生成AIの時代」への対応を強化しようとしているのだろうか。 生成AIを使って「再発明」を狙う AWSは、クラウドインフラを通してITシステムの在り方を改善し続け、それを顧客（主に導入企業）の課題解決に結び付けることをビジネスとしている。開発者イベントの名前が「re:invent」（再発明）であるのは、開発者とともに改善を続けることが、

2023年11月29日に発表されたばかりのAIチャットサービス「Amazon Q」にプライバシーの問題がある可能性が報じられました。一部の従業員によるとAmazon Qはひどい幻覚(ハルシネーション)に襲われることがあり、Amazon Web Services(AWS)のデータセンターの場所などを漏らすことがあるそうです。 Amazon’s Q has ‘severe hallucinations’ and leaks confidential data in public preview, employees warn https://www.platformer.news/p/amazons-q-has-severe-hallucinations Amazon's AI Chatbot, Amazon Q, Faces Criticism and Security Concerns h

5年とちょっと勤めた AWS を2024年1月末付けで退職します。12/1 が最終勤務日でした。 少し先ではあるのですが、在籍期間中に多くの AWS ユーザーや同僚にお世話になりましたので、有給消化中にご挨拶できるように、また感謝の気持ちを込めて、退職報告を書くことにしました。 ※ なお文中で SA とあるのはソリューションアーキテクトです。サービスエリアではありません。 AWS 入社のきっかけAWS の前はスタートアップに勤めていたのですが、諸事情により上場延期となり「一度スリップすると再上場申請には2-3年はかかる」と聞いたのとちょうど飽きていたので（おい）、スタートアップをメインに転職活動しつつ、AWS のサポートや開発職をなんとなく受けたりしていました。 その時に当時の担当営業だったK木さんに「なんで SA 受けてないんですか！」と言われ（怒られた気もする） SA 職に応募したのが

[アップデート]CloudWatch Logsに異常検出とパターン分析の機能が3つ追加されました！ #AWSreInvent はじめに CX事業本部の佐藤智樹です。 今回はCloudWatch Logsに異常検出とパターン分析のための機能が3つ追加されたため、それぞれを紹介いたします。CloudWatch Logsを見る際は基本開発中に正常動作しているかの確認や本番稼働中に不審な動作が起きているか確認する際の2パターンが多いかと思います。今回の機能は後者の通常とは異なるパターンが出た際に、障害箇所の特定や原因調査のために役立つ機能になるかと思います。 結論 今回のアップデートではCloudWatch Logs Insightsに1,2の機能が、CloudWatch Logsに3の機能が追加されたことだけ認識すれば大丈夫です。開発中や障害対応の訓練や発生時などに試してみて下さい。 パターンビ

［速報］AWS、読み込み性能も書き込み性能もスケールする「Amazon Aurora Limitless Database」プレビューを発表。AWS re:Invent 2023 Amazon Web Services（AWS）は、ラスベガスで開催中のイベント「AWS re:Invent 2023」で、新機能を備えたデータベースサービス「Amazon Aurora Limitless Database」のプレビューを発表しました。 Amazon AuroraはMySQLやPostgreSQLなどのリレーショナルデータベースをマネージドサービスとして提供するサービスです。 これまでAmazon Auroraでは、リードレプリカを増やすことで読み込み性能をスケールさせることは可能でしたが、書き込み性能に関してはマスターデータベースを稼働させているインスタンスのみに書き込みを行うため、このインス

AWSは、企業はチャットボットの採用に興味は持っているが、データのセキュリティとプライバシーに関する懸念も抱いているとし、より安全でプライバシーを守れるチャットボットとしてQを構築したという。例えば、Qは企業顧客が既に設定しているセキュリティ権限に従い、特定の従業員が機密データにアクセスできないようにする機能を備えている。 また、企業顧客はAmazon QにSlackやGmailなどの外部データソースへのアクセス権を与えることもできる。Amazon Qは特定のAIモデルに基づいておらず、Amazon独自のプラットフォーム「Bedrock」を使っている。これにより、米Anthropicや米Metaなどによる複数のAIシステムを接続できる。 セプリスキー氏は米New York Timesに対し、Qという名称は「Question」に由来するが、「007」シリーズに登場するMI6の研究開発部門の課

［速報］古いJavaや.NETのコードを最新のJavaにAIが自動変換する「Amazon Q Code Transformation」、AWSが発表。AWS re:Invent 2023 Amazon Web Services（AWS）は、ラスベガスで開催中のイベント「AWS re:Invent 2023」の基調講演で、生成AIを用いて多様なAIサービスを提供する「Amazon Q」を発表。Amazon Qの機能の一部として、古いJavaや.NETのコードを最新のJavaや.NET対応に自動変換する「Amazon Q Code Transformation」を合わせて発表しました。 参考：［速報］AWS、Copilot対抗となる「Amazon Q」発表。生成AIによるシステム開発支援や業務支援など、多様なAIサービスを提供。AWS re:Invent 2023 Amazon Q Code