最近ソーダストリームを買い、炭酸水を飲むのにはまってます。機械学習エンジニアの@yktm31です。 以前に「AWS Lake Formationでデータレイク体験！」という記事を書いてみて、データ基盤アーキテクチャに興味が湧いてきました。 データレイクハウスは、「データウェアハウス」と「データレイク」を統合したようなアーキテクチャで、 2020年にDatabricks社により提唱され、新しいデータ基盤アーキテクチャとして注目されているようです。 www.databricks.com そこで今回、「データレイクハウス」について調べてみたことをまとめてみたいと思います。 なぜデータレイクハウスが注目されているのか？ データウェアハウスの特徴・課題 データレイクの特徴・課題 データレイクハウスの特徴 データレイクハウスのアーキテクチャ Azure Azure Synapse Analyticsを

eBPFを用いたネットワーキングやセキュリティなど、AWS、Azure、Googleの3大クラウドが採用。Isovalentが明らかに クラウドネイティブな環境でeBPFを採用したネットワーキングやオブザーバビリティなどの機能を提供するオープンソースの「Cilium」を開発するIsovalentは、AWS、Microsoft Azure、Google Cloudの3大クラウドそれぞれのKubernetes環境でCiliumの採用が出揃ったことを、10月24日に米国ミシガン州デトロイトで行われたCloud Native eBPF Day NA 2022（KubeCon + CloudNativeCon NA 2022と同時開催）の基調講演で明らかにしました。 eBPFとは、Linuxカーネルのコードを変更することなく、カーネルの持つさまざまな機能をフックすることでカーネルに対してプログラマブ

オラクル、PostgreSQLデータベースに最適化した専用ストレージ「Aries」を用いた、高性能なマネージドサービス「PostgreSQL Aries」を提供予定と発表。Oracle CloudWorld 2022 オラクルは米ラスベガスで10月17日から4日間に渡って開催したイベント「Oracle CloudWorld 2022」において、PostgreSQLのマネージドサービス「PostgreSQL Aries」をOracle Cloudで提供予定だと明らかにしました。 「私たちはPostgresにも非常に大きな投資をしており、Postgresのマネージドサービスを提供しようとしている」（Well, we're also investing very heavily into Postgres. We're coming out with a managed Postgres ser

［速報］分散PostgreSQLをAzure Cosmos DBが提供開始、オープンソースの分散DBエンジン「Citus」を採用。Ignite 2022 マイクロソフトは現在開催中のイベント「Microsoft Ignite 2022」で、グローバル規模の分散NoSQLデータベース「Azure Cosmos DB」でPostgreSQLをサポートする「Azure Cosmos DB for PostgreSQL」を発表しました。 Cosmos DBはデータを自動的にユーザーの近くのリージョンにレプリケーションすることで、どのユーザーに対しても高速なデータベースアクセスを実現し、かつグローバルな規模で稼働する大規模分散NoSQLデータベースです。 最大で数ペタバイトのデータ容量と秒間数百万トランザクションまでスケールする性能をカバーできる点を特徴としています。 Azure Cosmos DB

「オンプレシステム移行は今もAWSやAzureの方がやりやすい」なら、Google Cloudは日本でどう使われているか：大日本印刷、みんなの銀行やインテグレーターに聞いた（1/4 ページ） 国内のAWS専業インテグレーターがGoogle Cloudを扱う動きが相次いでいる。第3のメジャークラウドであるGoogle Cloudの使われ方が変化してきたということなのだろうか。だとすれば具体的にどう使われているのか。ユーザーやインテグレーターに聞いてみた。 3大パブリッククラウドで最後発のGoogle Cloud。日本に進出後、ゲームをはじめとするテック企業の世界でこそ存在感を示してきたが、現在も「一部の人が使うクラウド」というイメージが強い。一般企業には浸透してきているのだろうか。 グーグル・クラウド・ジャパンは、他の主要クラウドと同様、日本での売り上げや成長率を明らかにしていない。だが、A

2022年3月1日（火）、スペイン・バルセロナのFira de Barcelona会場で開催されたMWC Barcelonaの2日目の基調講演で、Amazon Web Services（AWS）のCEOであるアダム・セリプスキーが講演を行った。Angel Garcia/Bloomberg ニューヨークのナスダック証券取引所で最高経営責任者（CEO）が終業ベルを鳴らすのは、たいてい自分の会社が株式公開されたばかりだからだ。6月27日にアダム・セリプスキーが鳴らしたのは、取引所との提携を祝うためだった。彼は、ハイテク企業のクラウドコンピューティング部門であるアマゾン・ウェブ・サービス（AWS）のボスであり、この取引は、取引所が株式市場をAWSのクラウドに移行する一環として行われたものだ。ナスダックの顧客は、証券取引所のプラットフォームを通じて、機械学習（ML）などAWSの高度な分析ツールを利用

【Teams障害時のワークアラウンド】Azure Communication Service を使って9クリックでグループ通話アプリをデプロイしてみたMicrosoftAzureTeamsAzureCommunicationServices はじめに 本日のTeams 障害でみなさんお仕事への影響はいかがでしたか？数時間ながらこういう障害はTwitterが盛り上がりますね。 私はちょうどフォーカスしていたタイミングだったのであまり影響はなかったですが、そんな中でりなたむ 💉✖︎3⃣ || Microsoft MVP さんが、こんなつぶやきを。 一般「なにぃ！？ #Teams が落ちた！？12時からの××社との打ち合わせどうするんだーワタワタ」 弊社「あ、Teams落ちたのかー　じゃあ #Azure の Communication Services つかって 簡易的な Web会議室作っちゃ

いくつかのクラウドサービスでは、1年程度の無料トライアルや一定額のクーポンなどに加えて、期間の制限なくずっと無料で使える、いわゆる「Free Tier」や「Always Free」と呼ばれる無料枠のサービスが提供されています。 こうした無料枠は試行用の環境や一時的なテスト環境などとして、期間を気にせずサービスを試すうえで非常に有効です。 本記事では期限の制約なく無料で提供されている主なクラウドサービスを、2022年版としてまとめました。 ただしこれらの無料提供サービスは提供側の都合によって終了することもあり得ます。また、最近では半導体不足などの影響でクラウドのサーバリソースなどが不足がちのためか、無料枠の申し込みが制限される場合もありますので、それらに留意して利用しましょう（一部では無料枠が空いたらすかさず取得する自動スクリプトなども出回っているそうです）。 Amazon Web Serv

Google CloudがArmプロセッサの採用を発表。これでAWS、Azure、Google Cloudなど主要なクラウドでArmプロセッサが利用可能に Google Cloudは、Arm Neoverse N1コアを搭載したAmpere Altraプロセッサベースの仮想マシンやKubernetesのノードの提供を、Google Compute EngineやGoogle Kubernetes Engineでプレビュー版として開始すると発表しました。 Introducing our first VM family based on the Arm architecture, T2A. Powered by Ampere® Altra® Arm-based processors, T2A VMs deliver exceptional single-threaded performance

Systemd Creator Lands At Microsoft Written by Michael Larabel in Microsoft on 6 July 2022 at 07:00 PM EDT. 213 Comments Yesterday's surprise was that Lennart Poettering quietly had left Red Hat following a decade and a half there leading PulseAudio among other projects and ultimately going on to start systemd that has fundamentally reshaped modern Linux distributions. It turns out he had joined Mi

みなさん、こんにちは。サイオステクノロジー武井です。今回は、Azure上に高速・堅牢なライブ配信環境を構築するお話をします。 OBSとは？昨今、テレワークの隆盛により、勉強会などのライブ配信に対する需要は高まるばかりです。オープンソースなライブ配信ソフトウェア「Open Broadcaster Software(OBS)」を使うことで、高度な配信を実現することが可能であり、現在圧倒的なシェアを締めております。 OBSの実行環境は結構ハードル高いOBSの実行環境はなかなかハードルが高いのが現状です。 潤沢なリソースOBSを動作させる際には潤沢なリソースを持つPCや高速な回線が必要となります。場合によっては専用のグラフィックカードを用いたハードウェアエンコーディングが必要な場合があります。 高速な回線OBSは、OBSで生成した動画をYouTubeなどの動画配信サービスにストリーミングで配信する

関連キーワード Microsoft（マイクロソフト） | Amazon Web Services | Google | Windows | クラウドサービス Microsoftは同社の「Microsoft Azure」ではない競合他社のクラウドサービスで、「Windows」「Microsoft Office」「Windows Server」「SQL Server」などの同社製ソフトウェアを使用するときに、利用料金が高くなるライセンス規約を設けてきた。同社は2022年5月、欧州の規制当局による調査を受け、このライセンス規約を緩和すると発表した。ライセンス規約の変更の実施時期は明らかにしていない。 今回のライセンス規約変更で恩恵を受けるユーザー企業は、限られる可能性がある。Microsoftは、Amazon Web Services（AWS）の同名サービスやGoogleの「Google Clo

You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert

You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert

マイクロソフトはコンテナをサーバレスで実行する新サービス「Azure Container Apps」の正式サービスとしての提供開始を発表しました。 Azure Container Apps is now generally available! You can learn more from our announcement: https://t.co/HvFxpRCmON. We can't wait to see the serverless apps and microservices you will build! #MSBuild — Azure Container Apps (@AzContainerApp) May 24, 2022 Azure Container Appsは昨年11月のイベント「Microsoft Ignite 2021」で発表されたサービスで、コンテナとし

信頼性の高いスケーラブルで安全なクラウド アプリケーションを構築するには、意図的なアーキテクチャ上の決定が必要です。 このセクションのベスト プラクティスでは、キャッシュ、データパーティション分割、API 設計、一時的な障害処理など、分散システムで発生する一般的な懸念事項に関するガイダンスを提供します。 各プラクティスでは、 Azure Well-Architected Framework の 1 つ以上の柱に対処します。これは、ワークロード設計の 5 つの品質属性 ( 信頼性、 セキュリティ、 コストの最適化、 オペレーショナル エクセレンス、 パフォーマンス効率) を定義します。 これらのプラクティスは、Azure アーキテクチャ センターの他の基本的なガイダンスを補完します。 Azure アプリケーションの設計原則は、自己復旧やスケールアウトのための設計など、高度な戦略を提供します。

いわゆる“3大クラウド”（AWS、Azure、GCP）が提供するサービスのうち、設定ミスが起きやすいのは？──トレンドマイクロは4月6日、定期的に公開しているセキュリティレポート内で、こんな調査の結果を発表した。 調査はトレンドマイクロが提供する、クラウド環境の設定不備を検知する企業向けサービス「Trend Micro Cloud One-Conformity」が、2021年に全世界で実施した検査の結果を基に実施。設定ミスの発生率などをクラウドサービスごとに算出した。 AWSで最も設定ミスが多かったのは、AWSの各種サービスの設定や管理を支援する「AWS CloudFormation」。約582万回の検査で、約257万件（発生率44％）の設定ミスが見つかったという。2位はストレージサービス「Amazon S3」（約753万回で約267万件、発生率35％）、3位はEC2インスタンス向けのスト