はじめに 因果推論100本ノック（自作）11本目~20本目の問題とPythonのサンプルコードです． 問題の不備や内容の誤り等ありましたら，ご指摘いただけますと幸いです． 設定 メールマーケティングの効果を推定するケースについて考えます． 化粧品のEC販売にて，メディアの会員の中で購買傾向の弱いユーザーにキャンペーンメールを配信します．手元には「過去に小規模なデータで実験を行ったデータ」と「今回購買傾向の弱いユーザーにメールを配信したデータ」が存在するとします． データは，下記フォルダの2つのファイルを利用します． 利用するファイルの概要は下記の通りです． causal_knock2_rct.csv: 実験データ（以下,rctデータ） causal_knock2_reg.csv: 購買傾向の弱いユーザーにメールを送ったデータ（以下，regデータ） データのカラムの概要は下記の通りです． 変

［解決！Python］辞書のキーや値を反復したり、特定のキーや値が含まれているかを確認したりするには：解決！Python 辞書のkeys／values／itemsメソッドを使ってビューオブジェクトを取得して、キーや値、それらの組を反復したり、特定のキーや値が辞書に含まれているかを確認したりする方法を紹介する。 d = {'key0': 0, 'key1': 1, 'key2': 2} # キーを反復 keys = d.keys() print(keys)  # dict_keys(['key0', 'key1', 'key2']) for key in keys: print(key)  # 'key0'、'key1'、'key2'が反復される # 値を反復 values = d.values() print(values)  # dict_values([0, 1, 2]) for va

データアナリティクス事業本部の鈴木です。 クラスメソッド データアナリティクス通信(機械学習編) の2023年4月号です。2023年3月分のアップデート情報をお届けできればと思います。 AWSでは、モデルの改善のための実験をよりスピードを上げて行うためのアップデートが印象的でした。例えば、Amazon ComprehendでFlywheels機能が提供され、対応するモデルの再学習が簡単になりました。Amazon SageMaker Canvasは、パフォーマンスの最適化により、より高速で正確なモデルトレーニングが提供されるようになりました。 Google Cloudでは、BigQueryでTF_VERSIONオプションおよびXGBOOST_VERSIONオプションで使用するライブラリのバージョンを指定できるようになったのが嬉しいですね。 それでは各々のアップデートを振り返って行ければと思い

はじめまして、sonesuke( https://twitter.com/sonesuke ) です。 LLMのニュースを追っかけ続けたので、これからキャッチアップする人用にまとめておきます。 各手法の説明を読む前に、「これだけは知っとけ用語」を読んでおくと意味がわかります。知っている人は飛ばしてください。 これだけは知っとけ用語 Retriever LLMの入力として含められる情報には上限があります。GPT-3.5で4k トークン。GPT-4でも、8K, 32Kトークンです。十分大きくなったとはいえ、本一冊分とかは無理なわけです。これをうまくチャンクに分けて、質問から、チャンク化された文章を検索できるようにしたものを、Retriverと言います。 詳しくは、下記のページが参考になります。 埋め込み(Embeddings) 簡単にいうと、LLMを使って、入力を固定長のベクトル表現にすること

GPTで「できること」を増やすための3つのアプローチを非エンジニア向けにまとめてみた 〜プラグインとAPIとファインチューニング 最近、とにかく話題が尽きないChatGPTやLLM（大規模言語モデル）。 毎日のように“できること”の情報がどんどんと更新されているので、追いかけるだけで精一杯！という方も多いのではないでしょうか。かくいう自分も相当インプットしているつもりですが、いまだに全容を掴みきれていません。 そこで今回は、自分自身の整理も兼ねながら、ChatGPTでプロンプト開発をする際の全体像をまとめてみました。 ※プロンプト：GPT等のLLMに対する入力文ないしはコマンドのこと チャット上でのプロンプトエンジニアリングはもちろん、pluginやAPI、LangChain、プロンプトの評価、さらにはファインチューニングまでテーマを広げてまとめています。 エンジニアにとどまらず、Chat

目次[非表示] 1.はじめに 2.AI関連の指針・原則・ガイドラインの動向 2.1.国内における分野横断の主なAI関連の指針・原則・ガイドライン 3.ChatGPTの業務利用に関する動向 3.1.ChatGPT等の業務利用を推進する企業様のニュース 3.2.ChatGPTの業務利用を制限・禁止する企業様のニュース 3.3.AIサービスの業務利用に関するガイドライン策定のニュース 4.ChatGPTのプライバシーポリシーと利用規約における留意点 4.1.情報漏えい 4.2.情報の正確性 4.3.参照 5.ChatGPT Web版の業務利用における情報セキュリティ上の留意点のまとめ 5.1.情報漏えい 5.2.情報の正確性 6.まとめ はじめに昨今、ChatGPTに関する話題に注目が集まるなか、「業務利用」について検討される企業様が増加しています。実際に、クラウドリスク評価「Assured（ア

You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert

2023年4月10日（月）12:36 追記 現在も引き続き、Twitter連携機能とTwitterログインがご利用いただけない状態が継続しています。 また、すでにお知らせした内容に加え、 ツイートをブックマークした際にタイトル等の取得に失敗する という不具合も発生しています。 ご利用の皆様にはご不便をおかけしており、誠に申し訳ありません。 これらの事象は、従来はてなで利用していたTwitter社の提供するAPIが、何らかの理由により利用できなくなったことに起因して発生しています。 現在詳細な原因の調査ならびにTwitter社への問い合わせなどの対応を進めておりますが、現時点で引き続き復旧の目処は立っておりません。 早期復旧の目処が立たないことから、現在、Twitterに関連する各種機能の代替となる機能や手段を提供すべく準備を進めております。 まずはご利用いただくケースも特に多いと考えられる

AI生成テキストや画像にはウォーターマークをつけるべきである2023.04.09 22:0010,476 Hany Farid - Gizmodo US ［原文］ （ そうこ ） カリフォルニア大学バークレー校のコンピューターサイエンス教授Hany Farid氏が、The ConversationにAIと著作権に関する意見を寄稿（CCライセンス）しています。AIが作りだす画像は年々リアルになっていき、本物かどうかを見極めるのは素人ではほぼ不可能。ならば、作る側（AI）がリアルではないとわかる何かしらのサインをつけるべきではないのかという話。以下、Farid氏の寄稿文です。 トランプ元大統領が起訴されるという噂が出てまもなく、ネットには彼が逮捕される瞬間の画像が出回った。これは、画像生成AIによって作られたフェイク画像である。 生成AIシステム。画像ならばDALL-EやMidjourney、

GPT-4は医師国家試験に合格するという研究結果が発表されて話題だったので、我々も馴染み深い IPA の試験にGPT-4は合格できるのか試してみた。 高度情報処理技術者試験の 午前I に限って言えば合格しているので、レポートをこちらに置いておく。 github.com まとめ 高度情報処理技術者試験の共通科目である午前I に 合格できる解答(正答率6割を超える)をGPT-4は生成する GPT-3.5 では合格できない。GPT-4 の賢さが際立つ ちなみに図表読み取り問題は入力できないので、すべて不正解扱いした やりかた IPA の Webサイトから、2022年度秋試験の午前I問題のPDFを取得 (PDF) Google Docs の OCR 機能でテキスト取得 手でコピペして整形 整形したファイルは こちら にある OpenAI の API に問い合わせて解答を取得。スクリプトはこちら。

コロプラは4月10日、チャットAI「ChatGPT」を使って業務改善を実現した社員に賞金を支給する「ChatGPT活用表彰制度」を始めたと発表した。 1カ月に1回、アイデアの独創性、工夫、実際の効果などを基に事例を審査し、社員を表彰。対象になった社員には、事例1件当たり5万円を支給する。ただし1カ月の支給金額は最大15万円まで。正社員だけでなく、契約社員やアルバイトも表彰の対象になる。 ChatGPTの有料プラン「ChatGPT Plus」の利用料を補助する制度も導入すると発表した。大規模言語モデル「GPT-4」を活用したプログラミング補助ツール「GitHub Copilot X」も導入。一連の施策により「業務改善を加速させ、ChatGPTの活用事例を早期に増やしていく」（同社）という。 関連記事 「東大生や教員は、生成系AIにどう対応すべきか」東大副学長が声明　「組換えDNA技術に匹敵す

テーマや文字数を指定するだけで、それに合った作文をChatGPTで自動生成できるサービス「AI作文くん」を、個人開発者の矢野さとるさんが4月10日に公開した。「身近な作文を通じて、子どもたちにも楽しみながらAIに触れてほしい」と、矢野さんは話している。 作文のタイトル、内容、文字数と、執筆者の性別、「小学生（低学年／高学年）」「中学生」「社会人」「赤ちゃん」「クレーマー」「ギャル」などのモードを選ぶと、それに合った文章を自動生成する。 オプションで、「含めたいキーワード」「書き出し部分」「終わりの部分」を指定することも可能。完成した作文を音声で読み上がることもできる。 同じテーマでも……小学生=簡単に　大学生＝小難しく 例えば、作文のタイトル「AIってすごい！」、内容「AIで作文できて、すごいと思った」を、小学生（高学年）モードで「100文字」を指定すると、以下のような文章ができた。 最近

ChatpGPT（モデルはGPT-4を利用）にシンプルなSELECT文とテーブル・インデックス定義を与えてSQLチューニングの案出しをしてもらいました。 ちなみに、プロンプトやChain of Thought などの工夫は一切せず、シンプルに質問をぶつけています。 以下、注意事項。 実務利用と比べるとシンプルすぎるのでお遊びの範囲を超えていません。 どのチューニング案が適切かは多くの要素（例えば以下）が関わってくるので、一概に判断できず実際に測定を行い確認する必要があります。 データ量やその分布 ハードウェアやRDBMSの種類・バージョンなどの環境 性能要件（何秒以内のレスポンスが必要か、同時実行数はいくつかなど） ChatGPTへの質問とその回答 1. 単純なインデックスが不足しているケース 質問 以下のSQL文の性能を改善するにはどうしたらよいでしょうか。 select custome

ChatGPT は既にエンジニア以外の方も含めて知られ始めています。2023年4月現在の ChatGPT が何なのかを整理するとともに。その社会やビジネスへの実装の価値を考えます。 入門編としてご参照ください。 - ChatGPT 概要 - Prompt の例 - 気の利いたPrompt

","naka5":"<!-- BFF501 PC記事下（中⑤企画）パーツ＝1541 --><!--株価検索 中⑤企画-->","naka6":"<!-- BFF486 PC記事下（中⑥デジ編）パーツ＝8826 --><!-- /news/esi/ichikiji/c6/default.htm -->","naka6Sp":"<!-- BFF3053 SP記事下（中⑥デジ編）パーツ＝8826 -->","adcreative72":"<!-- BFF920 広告枠）ADCREATIVE-72 こんな特集も -->\n<!-- Ad BGN -->\n<!-- dfptag ＰＣ誘導枠５行 ★ここから -->\n<div class=\"p_infeed_list_wrapper\" id=\"p_infeed_list1\">\n <div class=\"p_infeed_list\">

資料はOpenAIやChatGPTの来歴、導入実績や活用事例などを紹介するもの。API提供の背景や、AIによるシステムを人間の意図や価値観に合わせることで、安全性などを保つという考え方「アラインメント」についても説明している。 アルトマンCEOは10日に来日。岸田文雄総理大臣と面会後、自民党の会合に出席した。会合では「日本がAIの利活用を通じて世界で大きな存在感とリーダーシップを発揮してほしい」と話し、（1）日本関連の学習データのウェイト引き上げ、（2）政府の公開データなどの分析提供等、（3）LLMを用いた学習方法や留意点等についてのノウハウ共有──をはじめとする7つの提案を行った。 関連記事 OpenAIのアルトマンCEO、日本に対する7つの約束　「日本関連の学習ウエイト引き上げ」 ChatGPTを開発した米OpenAIのサム・アルトマンCEOが4月10日来日し、「日本関連の学習データの

4月10日に来日した、ChatGPT開発元である米OpenAIのサム・アルトマンCEOは、自民党本部での会合冒頭に挨拶し、日本で100万人を超えるユーザーがChatGPTを利用していると語った。 「日本でAIテクノロジーがこんなに早く広がるのは驚き」だとアルトマンCEO。 「AIの開発は革命をもたらすと信じている。いろいろなリスクも言われているが、できるだけ低減しメリットを増加させていくために、日本の果たす役割は大きい。将来に向けて日本政府、関係者の方々と緊密に連携していく」と話した。 最新のGPT-4について、「日本語、日本文化の点で能力が向上していると考えているが、GPTの将来のバージョンにおいてさらに向上を図れると感じている」とした。 サム・アルトマンCEOは「OpenAI Tour 2023」をうたい、東京を含む世界の17都市を巡り、講演および政策立案者との面談を行う予定だ。訪問を

人間のように自然な受け答えができる高度な性能を備え、世界で急速に利用が広がる対話式AI「ChatGPT」。開発したアメリカのベンチャー企業のCEO・サム・アルトマン氏（37）が来日し、NHKの単独インタビューに応じました。 この中でアルトマン氏は「想像できない方法で、私たちの生活を向上させるものだ」と述べた上で、「リスクを軽減するための規制が必要で、政府と話し合うことが重要だ」という認識を示しました。 「私たちすべての生活の質を向上させる」 アメリカのベンチャー企業「オープンAI」のCEO、サム・アルトマン氏は、「ChatGPT」を去年11月に公開した後の初めての訪問国として日本を訪れ、10日NHKの単独インタビューに応じました。 アルトマン氏は『ChatGPT』が社会に与える影響について、「新しいテクノロジーが登場すると、今日では想像できない方法で、私たちすべての生活の質を向上させること