世界最強の囲碁AI「AlphaGo」などを手がけるDeepMindが、プログラミングをこなすことができるAI「AlphaCode」を開発しました。AlphaCodeが書いたコードはコンテストで平均点を獲得し、人間レベルのコードを記述できることが証明されています。 Competition-level code generation with AlphaCode | Science https://doi.org/10.1126/science.abq1158 Competitive programming with AlphaCode https://www.deepmind.com/blog/competitive-programming-with-alphacode DeepMind's AlphaCode attains 'average' rating in programming

みずほ銀行とソフトバンクが折半出資する共同事業「Jスコア」を解消することが12日わかった。個人の信用力を点数化した上で、個人がお金を借りやすくする人工知能（AI）融資の仕組みをつくろうとしたが、金融と技術双方を分かる専門人材の不足などで競争力を保てなかった。米中で先行する信用スコアを、日本で軌道に乗せるには個人の理解を得ながらデータを活用できる仕組みが必要になる。信用スコアとは年齢や性別に加え

人々は、必要なすべての情報を常に目の前に表示しながら、日常を過ごせるようになると思われていた。 ところが、それから8年経った今でも、スマートグラスを身に付けて歩き回っている人はほとんど見かけない。 スタンフォード大学のElizabeth Gerber教授によれば、ここで得るべき教訓は、「テクノロジーはそれを求めている人にしか届かない」ということだという。 同氏は最近、スタンフォード大学のInstitute of Human-Centered Artificial Intelligence（HAI）が開催した秋のカンファレンスで行われたパネルディスカッションで、「人々がGoogle Glassを身に付けたがらなかったのは、プライバシーを侵されたくなかったであり、Google Glassが人同士のコミュニケーションを変えてしまうからだった。AIについて考える時には、Google Glassのこ

ヤフー株式会社は、2023年10月1日にLINEヤフー株式会社になりました。LINEヤフー株式会社の新しいブログはこちらです。LINEヤフー Tech Blog データプラットフォーム本部でエンジニアインターンに参加している杉浦です。 VMからKubernetesへ移行を予定しているプロダクトで、Kubernetes環境におけるカナリアリリース戦略を実装しました。これは本番環境でテストする手法の一つです。本記事がみなさんのリリース業務を円滑にする一例として参考になれば幸いです。 本番環境でも、できるだけ安全にテストしたい Kubernete環境に限らず、アプリケーションの変更は複数の検証ステップを通して品質を保証します。ほとんどの変更は、単体テストやステージング環境におけるQAで品質を十分に確認することができ、安心して本番環境へリリースできます。 一方で、本番環境上でテストするしかない変更

物理学に基づくシミュレーションをコンピューターグラフィックスで仕上げる動画をYouTubeチャンネルのTen Minute Physicsが投稿しています。Ten Minute Physicsがこれまで投稿してきた数多くのシミュレーションのコードや、実際にブラウザで動作するデモについて、運営者でNVIDIAの従業員であるというマルチーズ・ミラー氏が紹介しました。 Ten Minute Physics https://matthias-research.github.io/pages/tenMinutePhysics/index.html ミラー氏は記事作成時点で17本の動画を投稿しており、順番に視聴していくことでさまざまな2D・3Dシミュレーションを学んでいくことが可能です。ミラー氏はチュートリアルの動画のほか、シミュレーションのコードや実際にシミュレーションを動かせるデモサイトを公開して

AI研究団体・OpenAIが発表して話題を呼んだ対話型AI「ChatGPT」は、テキスト自動生成AI・GPT-3の派生形である「GPT-3.5」をファインチューニングした自然言語処理モデルです。チューリッヒ工科大学で機械学習とロボティクスの博士号課程に進んでいるダニエル・デュガス氏が、GPT-3が行っている数学的処理工程について解説しています。 The GPT-3 Architecture, on a Napkin https://dugas.ch/artificial_curiosity/GPT_architecture.html ◆入力／出力 まずGPTの「入力」とは一連のN個の単語のことで、「(入力)トークン」とも呼ばれます。そして、GPTの「出力」とは、入力トークンの最後に配置される可能性が最も高いと推測される単語です。例えば「not all heroes wear(すべてのヒーロ

先日リリースされたChrome 108で「メモリセーバー（Memory Saver）」と「省エネモード（Energy Saver）」が導入されました。これらは、Chromeがシステムリソースをどのように利用するかをユーザーがより詳細に制御できる機能です。 ユーザーとしてはメモリ節約モードのメモリセーバーも省エネモードも嬉しい機能ですが、Web制作者は認識しておくべき重要なことがいくつかあります。 What developers need to know about Chrome's Memory and Energy Saver modes メモリセーバーと省エネモード メモリセーバーと省エネモードの確認方法 メモリセーバーと省エネモード 先日リリースされたChrome 108のデスクトップ版で、2つの新しいパフォーマンス設定が導入されました。 メモリセーバー（Memory Saver）

使いたいときにHPCが使えない──研究者の悩み、クラウドで解決できたワケ　ゲノム解析の現場を救ったAWS活用（1/2 ページ） 近年、生物学の分野で急速な発展を遂げている「ゲノム研究」。生物の遺伝情報（ゲノム）を解読して、その種の基本性質や進化の過程、さらには未来までも予見できるとされる分野の研究だ。コンピュータを使って大量のゲノム情報を高速解析する「バイオインフォマティクス」の発展により急速に進歩し、2022年にはヒト（ホモ・サピエンス）のゲノムが完全に解読されるまでに至った。 このゲノム研究とバイオインフォマティクスの国内における先駆者の一人が、自然科学研究機構基礎生物学研究所で教授を務める重信秀治氏だ。同氏の研究室では現在、国内のさまざまな大学や学術機関と共同で、多種多様な生物のゲノム解析を進めている。年間約50もの共同研究プロジェクトが進行しており、その過程では膨大な量のゲノム情報

「エンジニアが不足し、テスト自動化の構築やメンテナンスがなかなかできなくて困っている」。これが多くのIT関連企業において共通した悩みでした、と話すのは、AutifyのCEOである近澤良氏です。 2019年、米国スタートアップの登竜門と言われるAlchemist Acceleratorプログラムに選ばれた近澤氏は、約100社ほどの企業との対話の中で、多くの企業において高速にシステム開発を行うことの重要度が高まっていることを実感したと言います。 近澤氏は、「多くの企業がソフトウェアリリースの速度を上げるためにテストの自動化を進めようとしているが、エンジニアが不足しているため難しい。また、テストを自動化しても、アプリケーション側に変更があるとテストが壊れてしまい、その都度メンテナンスに時間がかかるという共通の悩みを抱えていました。」と話しました。 市場の変化が速い昨今において、システム開発の高速

皆さんこんにちは 機械学習チーム YAMALEXチームの@tereka114です。最近、寒いので、鍋を中心に食べて生きています。 検証段階でも、規模の大きなデータを扱う機会が増えてきて、Pandasのメモリ消費量が厳しいと感じてきたので、その削減や効率化のテクニックまとめたいと思いました。 有名なものからマイナーなものまで、思いつく限り書いてみます。 そもそもなぜ、Pandasのメモリ削減技術が必要なのか 準備 Pandasのメモリ削減 1. 型修正 2. 逐次読み込み 3. 読み込み時の型指定 4. 逐次読み込み＆集約 5. 不要なものを読み込まない 6. 不要なカラム／DataFrameを消す 番外編：そもそもPandasを利用しない 最後に そもそもなぜ、Pandasのメモリ削減技術が必要なのか Pandasで扱うデータの多くのファイルはCSV,Parquet, JSON（JSONL

オミータです。ツイッターで人工知能のことや他媒体の記事など を紹介しています。 @omiita_atiimoもご覧ください！ 話題爆発中のAI「ChatGPT」の仕組みにせまる！ 注意：ChatGPTはまだ論文が出ていないため、細かい箇所は不明です。本記事では公式から出た記事およびInstructGPTの論文をもとにChatGPTの仕組みを探っていきます 本記事の流れ: 忙しい方へ ChatGPTとは GPT-3 InstructGPT ChatGPT まとめと所感 参考 0. 忙しい方へ ChatGPTは、InstructGPTをベースとしたモデルだよ InstructGPTは、「人間の好みに合った文を出力するように微調整したGPT-3」だよ InstructGPTの学習では、以下の3つが重要だよ GPT-3の教師ありファインチューニング Reward Modelの学習 RLHF（＝Re

[2022年最新版]Lambdaの裏側教えます！！A closer look at AWS Lambda (SVS404-R) #reinvent Lambdaファン必見 Worker ManagerをAssignmentサービスに置き換えた話、SnapStartの裏側でSparse filesystemを利用している話など、Lambdaの裏側がどうアップデートされたのかが分かります CX事業本部@大阪の岩田です。今年のre:inventは現地参加できなかったのですが、毎年楽しみにしていたLambdaの裏側を解説するセッションSVS404(番号は年によって微妙に違います)の動画がYoutubeにアップされていたので、さっそく視聴しました。これまで言及されてきた内容に加えて新たな解説も増えているので改めてレポートをブログにまとめます。 セッション動画 セッション動画はこちらから確認可能です

TauriがiOS/Androidに対応「Tauri Mobile」アルファ版登場。Electron代替を目指すRust製の軽量フレームワーク JavaScriptとHTML/CSSを用いてアプリケーションを構築できるElectronの代替を目指し、より軽量なフレームワークとして開発されている「Tauri」のモバイル対応版「Tauri Mobile」の最初のアルファ版公開が発表されました。 Tauriは開発にRust言語を用いて作られており、またUI基盤としてOSが備えているWebViewの機能を用いることで、Electron製のアプリケーションで組み込まれるChromiumのようなレンダラの組み込みを不要にするなど、Electronよりも軽量で高速なアプリケーションを実現するフレームワークであることが特徴です。 今年（2022年）6月には、Windows、Mac、Linuxに対応したバー

政府・与党は2024年に恒久化する少額投資非課税制度（NISA）の年間の投資枠をつみたて型について現行の3倍の120万円に、一般型を2倍の240万円に増やす方針を固めた。制度を拡充し、貯蓄から投資の流れを促す。週内にもまとめる2023年度与党税制改正大綱に盛り込む。NISAには投資信託に投資するつみたて型と国内外の上場株にも投資できる一般型がある。新制度では一般型を「成長投資枠（仮称）」に衣

概要 土木の分野では、機械の制御（ダムの制御）や都市開発（交通×AI）などで、強化学習が使われ始めています。 強化学習のアルゴリズムには、モデルフリーとモデルベースがあります。モデルフリーの有名なアルゴリズムは、深層Q学習(DQN)、アクター・クリティック(Actor Critic) などがあります。モデルベースの有名なアルゴリズムは、AlphaGo、AlphaZero、MuZeroなどがあります。 モデルフリーなアルゴリズムは、どのような行動すれば、高い報酬が得られるか探索する必要があり、サンプリングを多く行わなければならず、学習に時間がかかることも知られています。反対に、モデルベースなアルゴリズムは、サンプル効率が良いことが知られていますが、MuZeroのようなネットワークは、実用的ではないことが知られています。 今回の記事では、モデルベースのアルゴリズムであるDreamerV2につい

世界モデル系強化学習の先端手法であるDreamerV2をブロック崩し（BreakoutDeterministic-v4）向けに実装しました。 はじめに 世界モデルベース強化学習とは DreamerV2：Atari環境で初めてモデルフリー手法に並んだ世界モデルベース強化学習 世界モデル（World Models）について 方策の獲得 Dreamerへの系譜 Wolrd Models （2018） PlaNet： Deep Planning Network （2019） Dreamer （2020） DreamerV2 （2021） 非VAEの状態遷移モデル：MuZero（2020） Tensorflow2による実装例 世界モデル部 ロールアウト部 強化学習エージェント部 学習結果 雑記 DreamerV3 論文： DreamerV2: [2010.02193] Mastering Atari

１．Dreamer V2：モデルベース強化学習でモデルフリー強化学習を超える(2/2)まとめ ・Atariベンチマークには3つのパフォーマンス計測基準が存在するが一長一短であった ・Clipped Record Meanと言う従来手法より人間と比較しやすい新しい計測基準を提案 ・DreamerV2はゲーム全体で平均して人間の記録より25%上のスコアを達成した ２．Dreamer V2の性能 以下、ai.googleblog.comより「Mastering Atari with Discrete World Models」の意訳です。元記事の投稿は2021年2月18日、Danijar Hafnerさんによる投稿です。 アイキャッチ画像のクレジットはPhoto by Alvaro Reyes on Unsplash Atariのゲームを使ったパフォーマンスの測定 DreamerV2は、競争の激