この記事は Magic Moment Advent Calendar 2024 7 日目の記事です。 Magic Moment の @tdoi です。 2024年1月にジョインし、Magic Moment の製品開発を担当しております。 学生時代に、マルチエージェントシステムに関する研究に従事していました。 昨今、LLM の躍進によって、エージェントという言葉を見聞きすることが増えて少しそわそわしています。 はじめに GPT を始めとする LLM の性能の向上は著しく、ここ1、2年は、LLM をいかに活用するかを検討されてきた方も多いのではないでしょうか？ LLM の出力が期待以上であって驚くことも多い一方で、出力が不適切であることもあります。 対話的に利用している際はその出力を確認し、適切な判断のもとで活用すればよいのですが、 システムに組み込んで利用する際には、その出力結果の妥当性には

LLMOps基盤のシステムアーキテクチャ目次− 目次 − 対象読者 − TL;DR − 背景：LLMアプリケーション運用の課題 − LLMOps基盤のシステムアーキテクチャ −− 主なコンポーネントと役割 −− Langfuseを採用した理由 − 評価ドリブンなリリースライフサイクルの全体像 − オンライン評価プロセス −− 1. ログ・トレースデータの保存 −− 2. 評価とアノテーション − オフライン評価プロセス −− プロンプト実験 −− LLMアプリケーション統合実験 − 今後の展望 − 終わりに − 参考文献 こんにちは！Eureka AI Teamで、Pairs（ペアーズ）のMLOps Engineerをしているnariです。 こちらは、Eureka（Pairs） Advent Calendar 2024 の10日目の記事です。 本日は、私たちが構築した「LLMOps基盤」と

tl;drJSON Schema で指定したフォーマットで出力を制御可能になったよ cURL / Python / JavaScript のそれぞれで試してみたよ 具体的な実用例があったのでそれも動かしてみたよ 使う上での tips や今後どんな機能が追加されるかまとめたよ 公開されたブログの流れに準拠しつつ、意図がズレない範囲で翻訳、解説、コードの実行をしていきます。チュートリアルになっているので、よかったら手を動かして試してみてください。 Ollama が structured outputs をサポート。JSON Schema で定義したフォーマットに LLM の出力を制御するすることが可能になりました。Ollama の Python と JavaScript のそれぞれのライブラリにおいてもサポートするよう更新。 ブログでは structured outputs のユースケースとし

はじめに こんにちは。GMOアドパートナーズ 24年新卒の嘉山です。Slackで社内規程や制度について質問できるRAG（Retrieval Augmented Generation）アプリ「tomoc（トモック）」を、新卒2人で開発しました。本プロジェクトが発足してからというもの、界隈のテック系の記事を眺めていると「RAG」系のテーマが大半を占めており、昨今のRAGの流行り方は尋常じゃありません。（※ 確証バイアス：自分がすでに持っている先入観や仮説を肯定するため、自分にとって都合のよい情報ばかりを集める傾向のこと。） そこで一度、プロジェクト発足からリリースまでの直近数ヶ月を振り返ってみると、実際に手を動かしてコーディングしていく時間と同じくらい、いやそれ以上に技術選定やシステム構成、UIのデザイン、分析フロー、データの運用方法といった、「設計」の部分に多くの時間を費やしてきたことに気が

共同通信は、2022年8月15日に自民党の生稲晃子参院議員が靖国神社に参拝したと報じたのは誤りだったと発表した。全文は次の通り。 ◇ 共同通信は2022年8月15日の終戦の日の靖国神社参拝に関する記事で、自民党の生稲晃子参院議員（現外務政務官）が参拝したと報じましたが、正しくは生稲氏は参拝しておらず、誤った報道でした。生稲氏が今月24日、日本政府代表として出席した世界文化遺産「佐渡島の金山」の労働者追悼式に韓国政府関係者が参加を見送ったことに関連した複数の記事でも、生稲氏が参拝したと断定的に報じました。 生稲氏が今月24日に参院議員就任後の靖国参拝を否定し、当時の取材過程を調べました。その結果、靖国神社への国会議員の出入りを取材する過程で生稲氏が境内に入るのを見たとの報告がありましたが、本人に直接の確認取材をしないまま記事化したと分かりました。 また、当日参拝した複数の自民党議員が共同通信

(追記)今Kindleのランキングを見てみたら無料カテゴリ総合で1位になっていた。初めての増田の投稿でこんなことになるなんて夢にも思わず、ほんと皆んなには感謝している。嬉しすぎてコメント全部読んだので、鬱陶しくならない程度に文末に追加する。 ---- 自分としては「これは面白いものを作ったぞ！」と自信満々だったのだが、思ってたほどダウンロードされてないのでぜひ見てみてほしい。はてブではカレーの話題がちょくちょく上がるから、もしかしたらここに書けば俺らが届けたい人に届くんじゃないかと思った。 https://www.amazon.co.jp/dp/B0DJX32B2G 416種類のスパイスレシピを載せていて、1700ページを超える分量を無料配信している。といっても、著者は俺じゃなくて近所の友達なんだけども。 ーーーー 言いたいことはこれだけだったんだけど、ついでに、ここにいたるまでの自分語り

■国民民主党・玉木雄一郎代表（発言録）　あえて申し上げると、（衆院選の小選挙区で）連合が推薦したような（国民民主党の）候補者のところに立憲民主党さんが立ててきて、政治的には殺されかかった人間、いっぱい…

てか、もう煽るヤツは『釣り』とか言わずに『チャーハン』って呼ぼうゼ

こんにちは。ファンと共に時代を進める、Web3スタートアップ Gaudiy の seya (@sekikazu01)と申します。 LLM-as-a-Judge、名前の通り何かしらの評価にLLMを使う手法です。 LLMは非構造化データでもうまいこと解釈してくれる優れものなため、通常のプログラミングでは判断することが難しいことでも、それらしき判断やスコアをつけてくれます。 本記事ではそんなLLM-as-a-Judgeを、LLMを使ったシステムの振る舞いの改善の確認 and デグレ検知目的で作っていく際の、私なりの流れやTipsなどを紹介していきます。 なぜLLMでJudgeしたいのか？ はじめに「なぜLLMでの評価がしたいのか」、その目的を整理したいと思います。 まず大上段の目的として、LLMシステムが改善しているか、または劣化(デグレ)してないかを検知したいというのがあります。 LLMを使っ

このページでは選挙ドットコムさんに御協力をいただいてエンターテイメント表現の自由の会が実施した、第50回衆議院議員総選挙の候補者に向けた表現の自由についてのアンケートの結果をご紹介しています。 最終更新：2024/10/24 22:00 小選挙区 都道府県一覧 北海道 青森県 岩手県 宮城県 秋田県 山形県 福島県 茨城県 栃木県 群馬県 埼玉県 千葉県 東京都 神奈川県 新潟県 富山県 石川県 福井県 山梨県 長野県 岐阜県 静岡県 愛知県 三重県 滋賀県 京都府 大阪府 兵庫県 奈良県 和歌山県 鳥取県 島根県 岡山県 広島県 山口県 徳島県 香川県 愛媛県 高知県 福岡県 佐賀県 長崎県 熊本県 大分県 宮崎県 鹿児島県 沖縄県 比例区一覧 ※比例単独のみ掲載 北海道ブロック 東北ブロック 北関東ブロック 南関東ブロック 東京ブロック 北陸信越ブロック 東海ブロック 近畿ブロック 中

利用規約 | プライバシー規約 | パーソナライズド広告規約 | © 1996-2024 Amazon.com, Inc. or its affiliates

広瀬一隆/Hirose Kazutaka @hirosekazutaka ある物事を判断する際、「キモい」という表現で批評することは、許容されるべきなのか。 対象を「キモい」という場合、自らは「キモくない」立場にあることが前提にされていると思われるが、かように、権力関係を自身の感覚だけを基準に儲ける是非は、検討されるべきではないかな。 広瀬一隆/Hirose Kazutaka @hirosekazutaka 記者/PhD student。生命倫理専攻。MSc(King's College London)。新聞以外の過去の仕事→researchmap.jp/kazutakahirose 。医師免許あり。著書に『誰も加害者を裁けない』（晃洋書房）と『京都大とノーベル賞』（河出新書）。作家中村真一郎の作品が好き

神田錦町更科 @kandasarashina いつから何処からかは不明ですが、蕎麦を塩で食べるというのが通の食べ方だと言う人がいます。 江戸時代の文献を読んでも大根おろし汁で食べたり、味噌味の煮抜き汁や、醤油の原点のひしおで食べたの記述はありますが、塩は江戸蕎麦には出てきません。 pic.x.com/fr8cPnAeDx

開催します！ びっくりドンキー→びくドン丸亀製麺→丸麺（まるめん）餃子の王将→餃将（ぎょうしょう）セブンイレブン→セブイレうまい棒→うま棒ブラックサンダー→ブラサンベビースターラーメン→ベビラーおばあちゃんのぽたぽた焼き→おばぽたサッポロポテトつぶつぶベジタブル→ポロベジハーゲンダッツ→ハゲダ亀田の柿の種→亀種（かめたね）まるごとバナナ→まるバナU-NEXT→ユーネクYouTube→ようつべパナソニック→パナソニ任天堂→にんてんHUNTER×HUNTER→ハンハン葬送のフリーレン→そうれん世にも奇妙な物語→よにきみょ みんなも考えてみてください🙇‍♀️

RIT @hinabita_otaku これオキアミエキスと付属の昆布ポン酢が絶妙に噛み合っててほんと美味しい それに加えて豆腐とは思えないほどねっとり感強めな食感もしてるから、白子食べたい欲にジャストフィットするのよね x.com/123tter_/statu…

日本から遠く離れた東欧の人は2025年大阪・関西万博が開催される事実を知っているか、そして公式キャラクター「ミャクミャク」にどのような印象を抱くのか―。そんな疑問を抱いた記者が、ポーランドの首都ワルシャワで行き交う人々に質問をぶつけてみた。結果は、開催の事実を知る人はなく、ミャクミャクも「ゾンビ」「モンスター」などと、あまり好意的とはいえない反応ばかりが返ってきた。 「何て言っていいのか分からないけど、奇妙な姿だね。人工知能（AI）で動くモンスターとでもいおうか」 ワルシャワ市中心部の観光客も多く訪れる文化科学宮殿前で、近郊の都市から来たという30代の男性はミャクミャクのイラストを見ながら困惑した表情で答えた。大阪・関西万博の開催については「全く知らない」との回答だった。十数人に尋ねたが、大阪での万博開催の事実を知る人は一人もいなかった。 ワルシャワ市内の文化科学宮殿（写真奥の大型の建物）

QuizKnock。登録者200万人超えのクイズ系YouTuberにして、ウェブメディア運営、テレビ出演やアプリ開発など様々な活動を行っている企業でもあります。 QuizKnock【クイズノック】とは東大クイズ王・伊沢拓司が中心となって運営する、エンタメと知を融合させたメディア。 「楽しいから始まる学び」をコンセプトに、何かを「知る」きっかけとなるような記事や動画を毎日発信中。 QuizKnockとは | QuizKnock【クイズノック】　この記事を書いている私もQuizKnockは好きで、リアルイベントに行ったりフォロワークラブに参加したりはしていないので、生粋のQKファンからすると全然大したことないですが、4～5年前にチャンネル登録して以降、メインチャンネルの動画はそれ以前のものも含めてほとんど全て一度は観ていると思います。 ただ、最近になって特に、QuizKnock に対してモヤモ

GPT-4oの入力コンテキストは殆ど嘘だということ。 例えば、DRMをクラックした本とかを読ませて「なんて書いてある？」みたいなことを聞いてみると分かるのだが、後半については殆ど無視される。128Kトークンという巨大な入力コンテキストウィンドウを持っていることになっているが、これは殆ど嘘、ごまかしであり、出力を高速化するために「渡されたものの前のほうだけ読んで適当に回答する」ということをやってくる。でもこれについて問題視している人をほとんど見たことがないので、とっくにみんな生成AIには飽きていて使ってないんだと思う。 現実的な対策としては、RAGをがんばるか、あるいはテキストを分割して適切なサイズにしてから渡していって最後にその結果を統合するか。それか「OpenAIさんはそのレベルで信用できないことをやってくる」ということを前提にそもそも使わないか。