株式会社CARTA MARKETING FIRMでDSP(Demand-Side Platform)の開発をしている機械学習エンジニアのmikanfactoryです。特にMLOpsを担当しています。 背景 当社のDSPでは、配信ログを用いた機械学習モデルによる配信最適化を行っています。データパイプラインはSnowflake+dbtで構築し、Prefectを使用して機械学習モデルの構築・デプロイを実施しています。 サービスの成長に伴い、データパイプラインのコストは徐々に上昇傾向にありました。特に12月中旬には大幅なコスト増加が発生し、さらに年末年始の繁忙期を控えていたため、早急なコスト対策が必要となりました。 データパイプライン 図のような構成となっていました（※わかりやすくするために一部加工してあります）。 改善方針 影響範囲を最小限に抑えるため、上流（テーブルA、B）ではなく下流のテーブ

「取引先への詐欺行為」。東京地方裁判所は2024年7月、システム・エンジニアリング・サービス（SES）を手掛ける複数企業の事業内容をこのように認めた。経営陣らは、エンジニアとしての経験がなかった元社員に対して、経験を有する人材として振る舞うよう「経歴詐称」を強いていた。経営陣らはどのようにして未経験者をITエンジニアへと仕立て、システム開発現場に送り込んでいたのか。裁判の経緯や判決資料から明らかになった手法、日経クロステックが独自に得た関係者の証言からは、日本のIT業界が抱える構造問題が浮かび上がる。 「被告らの事業内容は、取引先に対する詐欺行為により利益を得ようとするものというほかない」。東京地方裁判所で、2024年7月19日に判決が下された損害賠償請求事件において、裁判長が認めた事実である。 裁判は、被告が運営していたSESを事業とする企業（以下、被告運営SES企業。一般のSES企業と

例えば、Content-Typeメタデータの値を細工したオブジェクトを取得させることでXSSを発生させたり、Content-Dispositionメタデータを細工してRFD (Reflected File Download) を引き起こしたり、 x-amz-storage-classメタデータを操作して意図せぬストレージクラスを使用させEDoS (Economical Deninal of Sustainability)を発生させたり、といった攻撃が成立する可能性があります。 中でもContent-Typeを悪用したXSSは、S3の仕様や使用方法だけでなく、ブラウザの挙動にも注意を払う必要があり、アプリ開発者は攻撃の原理と対処を理解しておく必要があります。 9/21にAzaraさんとSecurity-JAWSのコラボで、この問題にフォーカスしたCTFイベント「とある海豹とSecurity-

Anthropicがとんでもないものを出してくれた。Model Context Protocol（MCP）である。 強いタイトルでごめんなさい。AIエージェントに関わっていてMCP触ってない人は、たぶん忙しすぎる人なんだと思う。分かる！めっちゃ分かる！忙しいよね！！！！！ ということで、AIエージェントを研究・開発してるひとは是非MCPに触れてほしい。 最低でも、仕様は把握しておくべき AIエージェントにMCPによる拡張が可能な設計を考慮すべき 現状ではClaude DesktopがMCPに対応したクライアントだ。MCPはクライアントサーバの仕組みで、tooling（旧function calling）機能を任意のサーバーで実現できるものだ。 汎用プロトコルとライブラリ集なので、OpenAIやGoogleやollamaやLM Studioなどが対応することも可能だ。特にOSSや無料ソフトの

大学受験も佳境を迎えている。昨今は大学入試制度も様変わりしており、総合型選抜、いわゆる自己推薦による入試は既に10月に終わって、11月上旬には既に合格が決まった子もいる。11月末から12月に今度は学校推薦型選抜が行われ、こちらの合否は12月中旬には分かる。今や大学入試は、この2つの推薦試験で半分ぐらいは決まってしまう。 大学入学共通テストを受けて二次試験も受ける一般選抜の合否が分かるのは、3月上旬。入学準備に1カ月もなく、結構バタバタするものである。 かく言う筆者の娘は総合型選抜で早々に大学進学が決まったので、進学のバタバタは人ごとではなくなった。授業料だ奨学金だといったお金の問題の中で、簡単に考えていると地味にハマるのが、「大学生用PCをどうするか」である。 大学ではPCが必要という話はもう随分昔からあるが、ある意味大学や学部学科にもよるという格好であった。それが20年に発生したコロナ禍

#mysql #postgresql #プログラミング Webアプリケーション開発で欠かせないRDBのMySQLやPostgreSQL。どうやら風の噂ではUUIDを主キーにすると遅くなるらしい。…本当か？ その謎を解明すべくデータベースに潜り込んで調査してみました。 📻 Qiita FMでzaruのプログラマ半生を語ってます。CTO担った理由、YouTubeで配信したきっかけなど。ぜひ聞いてみてください。 https://open.spotify.com/show/4E7yCLeCLeQUsNqM4HXFXA 🛎️ 宣伝 : 本を書きました！ 「コードが動かないので帰れません!」 新人プログラマーのためのエラーが怖くなくなる本です。エラーログの読み方やデバッグの考え方、デバッガを使ったブレイクポイントの活用法を解説しています。 📖 https://www.amazon.co.

TOPフォーカスChrome“一強”、Webの進化は停滞した？「ブラウザの母」が語る、閉塞感を打破する鍵【フォーカス】 一般社団法人 WebDINO Japan 代表理事 瀧田 佐登子 国内大手IT企業でUNIX・インターネット事業に携わった後、米 Netscape 社でブラウザ製品の国際化・日本語化に従事。その後、 Netscape のソースコードを引き継ぐかたちで誕生したオープンソースブラウザ Firefox のリリースを機に、米 Mozilla 財団 （ Mozilla Foundation ）が設立されたのを受け、その日本支部として、2004年に Mozilla Japan を設立。代表理事として、 Mozilla の製品・技術の普及のみならず、Web標準技術やオープンソースの推進、Webの新たな可能性の探求や人材育成などにも取り組む。2017年7月より、社名を一般社団法人 Web

こんにちは！プロダクトエンジニアのshinokuです。 SmartHRでは、2023年の年末から定期的に社内のLT大会を開催しています。 テックブログでも毎回の内容を紹介しており、本記事の執筆時点だと6月に開催した第6回のブログが最新です。 tech.smarthr.jp 私も記念すべき第1回で登壇をしており、そのときの体験がとても良かったためLTが好きになりました。 本記事では、このLT大会がキッカケになって外部のLT会にも月一ペースで登壇するようになった話を紹介します。 なぜ月一ペースで外部のLT会に登壇するようになったのか 社内LT大会がキッカケとなって外部のLT会にも参加するようになった理由はいくつかあります。 理由１：知識・経験の棚卸の機会になる 社内LT大会への参加を通じて、LTの準備は自分が学んだことや経験したことを振り返り、それを体系的に整理する機会になると感じました。 さ

昔、面接官をやっていた時のこと。 我々は「どうすればコンサルタントの適性を持つ人材を集められるか」を追求していた。 長くても30分ほどの面接で、適切に候補者の選別を行うこと。 それは、「面接官の思いつきの質問」をするだけでは非常に難しかった。 我々は面接のやり方を試行錯誤した結果、「書かせること」で、かなり正確に候補者の能力を選別できることに気づいた。 一般的には面接では「話してもらうこと」を中心にすることが多いと思う。 が、我々はその場で「書いてもらう」ことにした。 ＊ そのやり方は、以下のようなものであった。 まず、お題を出す。 多くは現場の状況を切り取ったもので、次のような趣旨のこと書かれたいくつかの「資料」と「質問」を渡す。 背景 オーガニックカフェ「ナチュラルテイスト」は、都市部で成功を収めている小規模カフェチェーンです。（財務諸表・組織図・現状調査表は別添資料）新鮮で健康的な食

This is a piece of advice someone gave me a long time ago. Unfortunately, I don't really remember who, so I cannot properly attribute (although chances are they heard it somewhere too). But I decided to re-share this. What is refactoring? I'm sure we can find multitude of definitions. But with modern software development process it often becomes synonymous with any kind of code changes that do not

オープンコミュニティ「要求開発アライアンス」(http://www.openthology.org)の2012年12月定例会発表資料です。 Open Community "Requirement Development Alliance" 2012/12 regular meeting of the presentation materials.Read less

前回の記事では、新NISA制度がスタートしてからの感触を、つみたて投資のプロフェッショナルである、なかのアセットマネジメントの中野晴啓さんにお聞きしました。ふたを開けてみると「オルカン」ブームになり、それを懸念しているとのこと。今回は「オルカン」を含めたインデックスファンドとアクティブファンドの関係性について伺っていきます。 インデックスファンド時代の終焉が近づいている インタビュアー　川崎さちえ（以下、川崎）：前回の記事では、NISA制度が始まってみたら「オルカン」（オールカントリー）のファンドに集中してしまい、それが懸念点とのことでした。オルカンを買った人は、「え？ ダメなの？」と思うかも知れませんが、そんなことはないですよね？ 中野晴啓さん（以下、中野さん）：「オルカン」は全世界に分散投資ができるインデックスファンドなので、市場の動きそのものに準じた運用成果になります。世界の株式市場

米バイデン政権は、Huaweiに対する半導体の輸出許可を取り消す決断を下した。これに対し中国は強く反発。米中の分断はさらに深まると予測される。 米バイデン政権は2024年5月、Huaweiに対する半導体の輸出販売ライセンスを取り消す決断を下した。これにより、現在米国と中国の間で繰り広げられている技術戦争はさらに激化するとみられている。この動きはHuawei製のノートPCとスマートフォンに使用される半導体を対象にしたもので、Huaweiのサプライチェーンを混乱させている一方、中国の技術面の野望に関する懸念を再燃させている。 2019年から米国による貿易制限下にあるHuaweiは、IntelやQualcommといった米半導体メーカーから輸入する半導体に依存している。 ライセンスの取り消しによって、Huaweiのサプライチェーンは事実上断ち切られており、同社の新型ノートPCやスマートフォンの生産

PHPerKaigi 2024 • Day 1での登壇資料です。 https://phperkaigi.jp/2024/ https://fortee.jp/phperkaigi-2024/proposal/0d0f8507-0a53-46f6-bca6-23386d78f17f ※ Author…

正反対な君と僕 阿賀沢紅茶 <TVアニメ化決定！2巻分無料！>※一挙公開！キャンペーン期間：1/5まで※ <完結済み>空気を読んじゃう元気女子・鈴木が惹かれたのは、自分の意見をはっきり言える物静か男子・谷くん。大好評の読切が連載化！付き合った2人が楽しめる！共感マックスの等身大ラブコメ、ここに開幕！ [JC7巻発売中]

世界的な物価高が一服する中で、日本だけが実質賃金の伸びでマイナス圏を抜け出せずにいる。米国や英国などは2023年7～9月期までに名目賃金の上昇率が物価高を上回った。個人消費など内需主導の経済成長を進めるためには、日本でも賃上げの「質」が問われる。内閣府が23年12月に、主要国のインフレ率を差し引いた実質賃金の伸びを四半期ごとに分析した内容をまとめた。23年7～9月期の前年同期比の増加率は米国が

今週、経済学者のロバート・ソローが99歳で亡くなった。彼はこの分野における巨人であり、彼によってマクロ経済学は無数の方法で再構築され、それを今の僕たちは当たり前のように受け入れている。ソローは多くの重要な分野に携わったんだけど、一番有名な貢献（ノーベル賞の受賞）は、経済成長についてのソロー・モデルだ。なので今回のエントリでは彼を追悼して、ソロー・モデルは、この数十年間――特に中国経済で起こったことを説明するのにどう役立つかについて少し話してみようと思う。 経済はなぜ成長し、成長はなぜ止まるか？ この問題は、経済学で一番重要な問題なんじゃないかな。そして、ものすごく難しい問題でもある。成長というのはすごく複雑で、国によって経験は異なっている。比較は本当に難しい。ソロー・モデルは、ものすごくシンプルで、頭の良い中学生なら学ぶことができる。少しだけの変数・パラメーターしかない。こうした単純なモデ

敏腕クリエイターやビジネスパーソンに仕事術を学ぶ「HOW I WORK」シリーズ。 今回登場してもらったのは、「星のや」「界」「リゾナーレ」「OMO」などの施設を運営する星野リゾート代表の星野佳路（ほしの・よしはる）さん。 “リゾートの革命児”との異名を取る星野さんの、独自のビジネス理論やライフスタイルを参考にしている人も多いことでしょう。 そんな星野さんの頭の中を探るべく、ビジネスにおけるルールやコンディションの作り方、人生において大事にしているアドバイス、愛用の仕事道具まで、根掘り葉掘りお話を伺いました。 愛用している仕事道具や、仕事をする上で欠かせないものを教えてください・FREITAG（フライターグ）の財布、iPhoneケース、クラッチバッグ Photo: 柳原久子私は、FREITAG（フライターグ）が好きです。トラックの幌を再利用したブランドで、最初はその思想に惚れ込みました。1

外国為替市場で急激な円高が進んだ。日銀が早期にマイナス金利を解除するとの思惑が広がり、円の買い戻しにつながった。東京株式市場では円安による業績上昇修正期待がしぼみ、日経平均株価の下げ幅は2日で1100円を超えた。金融政策の「出口」を過剰に意識した取引が広がれば、相場の不安定化は避けられない。「これだけ急速に円が上昇するなかでは、円を売ってドルを買うのはかなり勇気がいる」。ある邦銀の外国為替ディ