本記事では、データ分析において重要な役割を果たす正規性検定について説明し、Pythonを用いた具体的な実装方法を紹介します。具体的には、ヒストグラムとQ-Qプロットの作成、そして正規性検定（ダゴスティーノの歪度/尖度検定、オムニバス検定、コルモゴロフ=スミルノフ検定、シャピロ=ウィルク検定）を取り上げます。 ヒストグラムの描画 ヒストグラムは、データの分布を可視化するためのツールです。Pythonでは、matplotlibのhist関数を使って簡単に描画できます。 import matplotlib.pyplot as plt import numpy as np # データ生成 data = np.random.normal(0, 1, 1000) # ヒストグラムの描画 plt.hist(data, bins=30) plt.show() Q-Qプロットの描画 Q-Qプロットは、データ

データ分析という言葉に身構えてしまう人は多いのですが、実際はそんなに怖いものではありません。一般的な業務内であれば専門的な知識が必要とされるケースは少ないですし、四則演算が出来れば大体対処できます。 このエントリでは、データ分析に苦手意識がある人やデータ分析の初心者の方に向けて、データ分析の基礎となる部分を解説します。 ※ このエントリは若手ビジネスパーソン向けに行ったデータ分析の講義をもとに書かれています [対象読者] - データ分析に苦手意識が強い人 - データ分析のタスクを依頼されたが、何をやればいいかわからない人 - スキルアップしたい若手ビジネスパーソン - 数学が嫌いすぎてデータを見ることすら嫌な人 [得られること] - データ分析の基本的な考え方 - 簡単なデータ分析の手法 データ分析が難しいと感じてしまうワケデータ分析というと、複雑なデータを難しい数式をこねくり回してさらに

Text Generation • Updated Nov 2, 2023 • 7.49k • 27

株式会社サイバーエージェント（本社：東京都渋谷区、代表取締役：藤田晋、東証プライム市場：証券コード4751）は、最大68億パラメータの日本語LLM（Large Language Model、大規模言語モデル）を一般公開したことをお知らせいたします。 近年、OpenAI社が開発した「ChatGPT」※1 を始めとする生成AI・LLMは急速な進化を遂げており、世界中のあらゆる業界・ビジネスにおいて活用が進んでいます。 一方、既存のLLMのほとんどは英語を中心に学習されているため、日本語および日本文化に強いLLMは少ない状況です。 ■最大68億パラメータの日本語LLM（大規模言語モデル）の公開について こうした背景のもと、当社は日本語LLMの開発に取り組んでおり、このたび一部モデルをHugging Face Hubにて公開いたしました。公開されたモデルはオープンな日本語データ※2で学習したもので

May 15 (Reuters) - OpenAI is preparing to release a new open-source language model to the public, The Information reported on Monday, citing a person with knowledge of the plan. OpenAI's ChatGPT, known for producing prose or poetry on command, has gained widespread attention in Silicon Valley as investors see generative AI as the next big growth area for tech companies. In January, Microsoft Corp

グーグルは、5月10日にカリフォルニア州マウンテンビューで開催された年次開発者会議で、Gmailの文章の作成支援ツールや「イマーシブビュー」と呼ばれる没入型のGoogleマップのルート案内機能などを発表した。しかし、その中にはテック業界以外ではあまり注目されなかった画期的機能が含まれていた。 グーグルは、人工知能（AI）を用いて検索結果を提示する方法を変えようとしている。そして、この機能は、起こりうる結果を誇張していうなら、すでに生き残りに苦戦しているオンラインパブリッシャーたちに核爆弾を投下するものになりそうだ。 グーグルは10日のイベントで、検索エンジンの検索結果に生成AI（ジェネレーティブAI）を導入した機能を実演した（この機能は、まだ一般には展開されていない）。同社は「3歳以下の子どもと犬のいる家族が旅行に行く場合、米国のブライスキャニオン国立公園とアーチズ国立公園のどちらが良い選

対話型AIのChatGPTなどを開発したOpenAIのサム・アルトマンCEOがアメリカで開かれた公聴会に出席し、AIに対する今後の方針として「利点を伸ばす一方で、AIの害を最小限に抑えるための政府による規制介入が重要になる」との考えを示しました。 Oversight of A.I.: Rules for Artificial ... | United States Senate Committee on the Judiciary https://www.judiciary.senate.gov/committee-activity/hearings/oversight-of-ai-rules-for-artificial-intelligence WATCH LIVE: OpenAI CEO Sam Altman testifies on artificial intelligence

【シリコンバレー=渡辺直樹】対話型人工知能（AI）「Chat（チャット）GPT」を開発した米新興オープンAIのサム・アルトマン最高経営責任者（CEO）は16日、米議会上院の小委員会で証言した。AIのリスクに対し「政府による規制面での介入が重要になる」と述べ、高度なAI開発とサービス提供にライセンス制を導入することを提案した。アルトマン氏が提案した新しい機関は、原子力規制のように一定以上の能力を

急速に利用が広がる対話式AI、ChatGPTを開発したベンチャー企業「オープンAI」のCEOが、アメリカ議会の公聴会で初めて証言し、AIの安全な利用には規制が不可欠だとしたうえで、アメリカが主導して世界共通のルール作りをすべきだと強調しました。 アメリカ議会上院の委員会は、16日公聴会を開き、ChatGPTを開発した「オープンAI」のサム・アルトマンCEOが、安全対策などについて、およそ3時間にわたって初めて証言しました。 この中で、アルトマンCEOは「われわれの技術がこれまでにもたらした利益は、リスクを大きく上回ると信じているが、安全性の担保は極めて重要だ」と指摘しました。 そして、「AIの性能が向上するにつれて生じるリスクを軽減するため、政府による規制が不可欠だ」と述べ、技術の開発や一般公開にあたっては十分な実験の実施などを要件とすることなどを提案しました。 また、議員から、世界的に急

人工知能研究の権威である松尾豊氏（東京大学大学院教授）が理事長を務める日本ディープラーニング協会（以下、JDLA）が、5月1日に、生成AIの利用ガイドラインを公開した。こちらは誰でも無償で入手できるものだ。 ChatGPTを始めとした、質問や要求を入力するとそれに見合った成果物を出力してくれる生成AIを、企業内で利用するときに、最低限定めておきたい要素がまとまっている。そこで、リスクマネジメントや法務に関わる人のみならず、ビジネスで生成AIを利用しているビジネスパーソンのみなさん向けに、ガイドライン本編を理解する一助にして欲しく、要点を、本記事にて解説する。 生成AIの利用ガイドラインの交付元 日本ディープラーニング協会とは？ 引用元：JDLA ガイドラインは、Microsoft Word形式で公開されており誰でも無償で入手できる。 条項のみで、必要な部分を穴埋めすれば、すぐにガイドライン

気になるWebページを簡単にブックマークできる、はてなブックマーク公式の拡張機能です。 記事のブックマークに特化した「はてなブックマーク」の拡張機能が新登場！ デザインも刷新！　Webで見つけた気になる記事を、コメントやタグを付けて素早く保存できるオススメの公式ツールです。 【新しい拡張機能の機能】 新バージョンでは、以下の機能をお使いいただけます。 - 見ているWebページをブックマーク - コメント機能・タグ機能 - おすすめタグのサジェスト - Twitter連携 (※設定が必要です） - 「あとで読む」機能 - 非公開ブックマーク - ブックマークの編集・削除 - 見ているWebページへのブックマークコメント閲覧 【もっと知りたい方へ】 機能や使い方の詳細は、下記リンク先をご参照ください。 https://bookmark.hatenastaff.com/entry/extensi

オンライン法律相談サービスなどを展開する弁護士ドットコム（東京都港区）は、ChatGPTを活用したAI法律相談チャットサービス「弁護士ドットコム チャット法律相談（α版）」を5月12日に公開した。誰でも1日5回までなら、いつでも無料で相談できるという。 弁護士ドットコムが2007年から展開している「みんなの法律相談」に寄せられた125万件以上のデータから抽出した質問／回答とMicrosoft AzureおよびAzure OpenAI Serviceを活用したチャット形式の法律相談サービス。α版では相談数の上位を占める離婚、浮気、金銭トラブルなど男女の問題について相談できる。 ただし入力した情報と弁護士ドットコムのデータベースに基づき、AIが自動的に相談内容に対応した文章を生成するサービスのため「AIによる回答内容の正確性および最新性を保証するものではない」としている。 今後は交通事故、相続

ドイツのAI翻訳サービスDeepLのヤロスワフ・クテロフスキー（Jaroslaw Kutylowski）CEOが来日し、プレス向けに事業戦略を語るラウンドテーブルを開いた。 イベント開催は5月12日のこと。実はその前日に、クテロフスキー氏は東京の自民党本部などにも訪れていた。 プレス陣に語ったのは、現在のAIについての問題点、そして7月に設立する日本法人の状況、日本向けの事業戦略、さらにChatGPTの影響など多岐にわたる。 DeepLの経営トップが見る翻訳AIとビジネスの現状をレポートする。

by Robert Occhialini GoogleがチャットAIの「Bard」を検索エンジンに組み込むことを発表したり、MicrosoftがGPT-4を用いた検索エンジンAIの「Bing AI Chat」をリリースしたりと、IT大手各社はAIを組み込んだ検索システムの構築に向けてしのぎを削っています。さらに、Amazonが出した求人情報から、同社が商品の検索にAIを導入しようとしていることが分かりました。 Amazon (AMZN) Plans to Add ChatGPT-Style Search to Its Online Store - Bloomberg https://www.bloomberg.com/news/articles/2023-05-15/amazon-plans-to-add-chatgpt-style-search-to-its-online-store A

ピクシブは5月16日、作品販売サイト「BOOTH」における、AI生成作品への対応方針を発表した。人が作ったかAIが作ったかを問わず、他作品と差別化できていない作品は、検索結果から除外する。 「主にAI生成作品に顕著に見られる、同一の制作技術を用いたことによる他と差別化されていない作品を出品するショップに対しては、順次該当ショップの全出品物を検索結果に掲載しないようにする」（同社）という。具体的な基準は「境界付近を狙う悪質行為を防ぐ」として公開しない。 ピクシブによればBOOTHでは、一部ユーザーがAIで生成した作品を大量出品する行為が目立っているという。BOOTHにおけるAI生成物の出品傾向については以下のように説明している。 成果物の独自性が薄く、かつ、同じものばかりが並ぶ傾向を加速させやすく、検索画面での閲覧体験を阻害することがある 低い生成コストで作品が大量生成・出品され、また利用規

いつもはてなブックマークをご利用いただき誠にありがとうございます。はてなブックマーク開発チーム、ディレクターのid:yone-yamaです。 2023年4月8日の告知にてお知らせした通り、Twitter社提供のAPIが利用できなくなったことに起因し、はてなブックマークでTwitterに関連する機能がご利用いただけない状態が継続しています。 ご利用いただけなくなった機能のうち「ブックマーク時のTwitterへのシェア」の代替手段として、2023年5月9日にブラウザ版の共有メニューをリリースしました。 bookmark.hatenastaff.com このたび、はてなブックマークアプリならびに拡張機能（Chrome拡張・Firefoxアドオン）についても、Twitterをはじめとした外部サービスへブックマークを共有できるメニューを追加しました。 また、ご要望を多くいただいておりましたブックマー