What Is ChatGPT Doing … and Why Does It Work?
What Is ChatGPT Doing … and Why Does It Work? February 14, 2023 It’s Just Adding One Word at a Time That ChatGPT can automatically generate something that reads even superficially like human-written text is remarkable, and unexpected. But how does it do it? And why does it work? My purpose here is to give a rough outline of what’s going on inside ChatGPT—and then to explore why it is that it can d
GPTã®ä»•çµ„ã¿ã¨é™ç•Œã«ã¤ã„ã¦ã®è€ƒå¯Ÿï¼ˆï¼‘） - conceptualization
GPT4ãŒç™»å ´ã—ã¦ChatGPTãŒç››ã‚Šä¸ŠãŒã£ã¦ã¾ã™ã。 本記事ã¯ã€GPT（を支ãˆã‚‹Transformerã¨ã„ã†ä»•çµ„ã¿ï¼‰ã‚’ChatGPTユーザã«ã¨ã£ã¦åˆ†ã‹ã‚Šã‚„ã™ã説明ã—ã€ãã®èƒ½åŠ›ã¨é™ç•Œã«ã¤ã„ã¦ã®è¦‹é€šã—をよãã—よã†ã€ã¨ã„ã†è¶£æ—¨ã«ãªã‚Šã¾ã™ã€‚ å°‘ã—é•·ããªã‚Šãã†ãªã®ã§ã€å…¨éƒ¨ã§è¨˜äº‹ã‚’3回ã«åˆ†ã‘よã†ã¨æ€ã„ã¾ã™ã€‚ （１）大ã¾ã‹ãªèƒŒæ™¯ã¨æ¦‚è¦ï¼šæœ¬è¨˜äº‹ （２）GPTã®èƒ½åŠ›ã¨å¯èƒ½æ€§ï¼šå®Ÿéš›ã®ä½¿ç”¨ä¾‹ã¨Transformerã®ä»•çµ„ã¿ã‚’è¸ã¾ãˆã¦èª¬æ˜Ž （３）GPTã®é™ç•Œã¨æœªæ¥å±•æœ›ï¼šTransformerã®ä»•çµ„ã¿ãŒæŒã¤é™ç•Œã¨ç ”究ã®é€²å±•ã‚’予想 GPT3ã¨4ã®é•ã„： トークン長ã¨ã¯ä½•ã‹ï¼Ÿ ã¾ãšã“ã“ã‹ã‚‰è©±ã‚’始ã‚ã¾ã™ã€‚GPT-3ã¯ã€ãƒ‘ラメータ数ãŒ750億個（850GBã®å®¹é‡ã‚’食ã†ï¼‰ã§ãƒˆãƒ¼ã‚¯ãƒ³é•·ãŒ4097(GPT-3.5)ã§ã—ãŸã€‚GPT-4ã¯ã€ãƒ‘ラメータ数ã¯éžå…¬é–‹ã§ãƒˆãƒ¼ã‚¯ãƒ³é•·ã¯32768ã§ã™ã®ã§ã€ã¡ã‚‡ã†ã©8å€ã«ãªã‚Šã¾ã™ã€‚ ã•ã¦ã€ãƒˆãƒ¼ã‚¯
GPT-4
We’ve created GPT-4, the latest milestone in OpenAI’s effort in scaling up deep learning. GPT-4 is a large multimodal model (accepting image and text inputs, emitting text outputs) that, while less capable than humans in many real-world scenarios, exhibits human-level performance on various professional and academic benchmarks. We’ve created GPT-4, the latest milestone in OpenAI’s effort in scalin
ã‚„ã°ã™ãŽã‚‹AIç”»åƒç”Ÿæˆã‚µãƒ¼ãƒ“ス「Stable Diffusionã€å§‹ã¾ã‚‹ã€‚ ã€ç°¡å˜è§£èª¬ & 応用 & Prompt付生æˆäº‹ä¾‹é›†ã€‘｜やã¾ã‹ãš
一応ã€StableDiffusionã¨ã¯ã¯ã£ãã‚Šã¾ãšè¨€ã„ã¾ã™â€¦ã¨ã«ã‹ãã‚„ã°ã„ã§ã™ã€‚ 分ã‹ã‚Šã‚„ã™ãã€ä»–ã®DALL・E2ã€Midjourneyã€Disco Diffusionã€ä»–有象無象Text to image machine learning系サービスã¨æ¯”較ã—ã¾ã™ã¨â€¦ クオリティãŒã‹ãªã‚Šé«˜ã„。 制é™ãŒãªããªã‚Šã€ã‹ãªã‚Šç´°ã‹ã„調整ãŒã§ãるよã†ã«ãªã£ãŸDALL・E2ã®ã‚ˆã†ãªæ„Ÿã˜ã§ã™ã€‚ 生æˆãŒæ—©ã„。 è¨å®šãªã—ã§ä½¿ãˆã°æ£ç›´ä½“æ„ŸDALLE2より早ã„ã§ã™ã€‚6秒..ãらã„？ 安ã„。 3円ãらã„ã ã¨æ€ã„ã¾ã™ã€‚ DALL・E2ã¯1生æˆ17円。Midjourneyã¯æœˆ4000円。 オープンソース ã“ã‚Œã‹ã‚‰ã„ã‚ã‚“ãªã‚µãƒ¼ãƒ“スã«ã“ã®AIãŒæ載ã•ã‚Œã¾ã™ã€‚ ä»–AIã§ã¯ã‹ã‘られã¦ã„ã‚‹å¦ç¿’データã®ãƒ•ã‚£ãƒ«ã‚¿ãƒ¼ãŒãªã„。 å„国ã®ä»£è¡¨è€…ã‚„ã€æœ‰å人ã€ãƒãƒ«ãƒŽãŒãƒ‡ãƒ¼ã‚¿ã«å«ã¾ã‚Œã¦ã„ã¾ã™ã€‚ PC上ã§ä½¿ç”¨ã§ãる。（ = ãã®å ´åˆç„¡æ–™ï¼‰ ã„ã‚„ã€ã“
「人工知能ã§ã„ã„æ„Ÿã˜ã®æˆæžœã‚’出ã—ã¦ãã‚Œã€ã¨ã„ã†å‰ã„人ã®è„³å†…ã¯ã©ã†ãªã£ã¦ã„ã‚‹ã®ã‹ – ã¨ã“ã‚ã¦ã‚“ – Medium
ã“ã®è¨˜äº‹ã¯ã€å‰å‡ºã®æœ¬ã«å…¥ã‚Œã‚‹äºˆå®šã ã£ãŸã‚³ãƒ©ãƒ ã®ã†ã¡ã®ä¸€ã¤ã§ã™ã€‚ æ£ç¢ºã«ã„ã†ã¨ã€æœ¬ã«å…¥ã‚Œã‚‹äºˆå®šã ã£ãŸã‘ã©ã€ãƒ¡ã‚¤ãƒ³å´ã§ç· ã‚切りをã¶ã£ã¡ãŽã£ã¦ã„ãŸã‚‰ã€ã‚³ãƒ©ãƒ ã‚’è¿½åŠ ã§ãるよã†ãªç©ºæ°—ã˜ã‚ƒãªããªã£ã¦ã€æ›¸ãã®ã‚’ã‚„ã‚ãŸã‚‚ã®ã§ã™ã€‚ 本ã®å®£ä¼ã‚’å…¼ãã¦ã€æ²¡ã«ã—ãŸã‚³ãƒ©ãƒ ã«æ—¥ã®ç›®ã‚’見ã•ã›ã¦ã€ã‚ã‚よãã°ç¬¬äºŒç‰ˆã§å…¥ã‚Œã°ã„ã„ãªãƒ¼ã€ã¨ã„ã†å†…容ã§ã™ã€‚ データサイエンティストã®é ã®ä¸ã€Œå‰ã„人ãŸã¡ã¯é ãŒãŠã‹ã—ã„ã€ã¨è¨€ã£ã¦ã‚‚ã€ãã‚Œã¯ç›¸å¯¾çš„ãªã‚‚ã®ã§ã‚ã‚‹ãŸã‚ã€æ¯”較対象ã§ã‚るデータサイエンティストã®é ã®ä¸ã‚’覗ã„ã¦ã¿ã¾ã—ょã†ã€‚ データサイエンティストã¯çµ„ç¹”ã«ãŠã‘るデータ活用状æ³ã«ã¤ã„ã¦ã€ãƒ¬ãƒ™ãƒ«åˆ†ã‘ã—ã¦è€ƒãˆã¾ã™ã€‚ãã—ã¦ã€åŸºæœ¬çš„ã«å‰ã®ãƒ¬ãƒ™ãƒ«ãŒå®Ÿç¾ã§ããªãã¦ã¯ã€æ¬¡ã®ãƒ¬ãƒ™ãƒ«ã«é€²ã‚€ã“ã¨ã¯ã§ããªã„ã¨è€ƒãˆã¦ã„ã¾ã™ã€‚ 以下ã®ãƒ¬ãƒ™ãƒ«åˆ†ã‘ã¯ç§ãŒé©å½“ã«æ€ã„æã„ã¦ã„ã‚‹ã‚‚ã®ã§ã™ãŒã€åŒæ¥è€…ãªã‚‰å¤§ã‚ˆã一緒ãªã‚“ã˜ã‚ƒãªã„ã‹ã¨æ€ã„ã¾ã™ã€‚ Lv0: データåŽé›†ã€ãƒã‚°è¨è¨ˆLv1
人工知能ã®æ´å²ã€€AIを如何ã«ã—ã¦é”æˆã—よã†ã¨ã—ãŸã‹ - HELLO CYBERNETICS
※ã‚ã¡ã‚ƒãã¡ã‚ƒé•·ã„ã§ã™ã€‚一連ã®æµã‚Œã§èªã‚€ã¨ç†è§£ãŒæ·±ã¾ã‚‹ã¨æ€ã„ã¾ã™ã€‚自身ã®å¾©ç¿’ã®ãŸã‚ã«ã‚‚書ã下ã—ã¾ã—ãŸã€‚個々ã®ç« ã§å®Œçµã—ã¦ã„ã‚‹ã®ã§ã€ãã‚Œãžã‚Œåˆ¥ã®è¨˜äº‹ã¨ã—ã¦ã‚‚掲載ã—ã¦ã„ã¾ã™ã€‚ è¿‘å¹´ã¯äººå·¥çŸ¥èƒ½ãƒ–ームãŒåˆ°æ¥ã—ã€äººå·¥çŸ¥èƒ½ã¨ã„ã†ãƒ¯ãƒ¼ãƒ‰ã‚’当ãŸã‚Šå‰ã®ã‚ˆã†ã«ä½¿ã†æ™‚代ãŒã‚„ã£ã¦ãã¾ã—ãŸã€‚æƒ…å ±æŠ€è¡“ã‚’å¦ã‚“ã§ã„る人ã«ã¨ã£ã¦äººå·¥çŸ¥èƒ½ã¯ã€æƒ…å ±å‡¦ç†ã‚’効率的ã«è¡Œã†ç´ 晴らã—ã„技術ã®ä¸€ã¤ã¨ã—ã¦èªè˜ã§ãã‚‹ã‹ã¨æ€ã„ã¾ã™ã€‚一方ã§ã€æŠ€è¡“的話題ã«ã‚ã¾ã‚Šèˆˆå‘³ãŒãªã„人ã«ã¨ã£ã¦ã¯ã€äººå·¥çŸ¥èƒ½ã¨ã„ã†ãƒ¯ãƒ¼ãƒ‰ã«å¯¾ã—ã¦å„々ã®è§£é‡ˆã‚’ã—ã¦ã€æ™‚ã«ã¯èª¤è§£ã®ã‚ˆã†ãªæ„見も見å—ã‘られã¾ã™ï¼ˆäººå·¥çŸ¥èƒ½ã®å…¨å®¹ãŒãƒãƒƒã‚リã—ãªã„ã†ã¡ã¯èª¤è§£ã¨ã„ã†ã®ã¯ã‚ã¾ã‚Šã«ã‚‚å¼·ã™ãŽã‚‹è¨€ã„æ–¹ã§ã™ãŒï¼‰ã€‚ 人工知能ãŒã©ã†ã„ã†ã‚‚ã®ã§ã‚ã‚‹ã®ã‹ã‚’知るã«ã¯ã€äººå·¥çŸ¥èƒ½ã‚’技術的ã«ã„ã‹ã«ã—ã¦é”æˆã—よã†ã¨ã—ãŸã‹ã®æ´å²ã‚’知るã“ã¨ãŒä¸€ç•ªã§ã‚ã‚‹ã¨æ€ã„ã¾ã™ã€‚ ã“ã“ã§ã®è¨˜äº‹ã®ç›®çš„ã¯æŠ€è¡“çš„ãªè¦³ç‚¹ã‹ã‚‰ã®äººå·¥çŸ¥èƒ½ã«ã¤ã„ã¦èª¬æ˜Žã™ã‚‹ã“ã¨
ブラウザã‹ã‚‰æ‰‹è»½ã«æ·±å±¤å¦ç¿’AIを教育ã§ãるオープンソースソフトウェア
ブラウザã‹ã‚‰æ‰‹è»½ã«æ·±å±¤å¦ç¿’AIを教育ã§ãるオープンソースソフトウェア You can train a deep neural network on your web browser 2015.12.24 Updated by Ryo Shimizu on December 24, 2015, 06:00 am JST 先日発表ã—ãŸæ·±å±¤å¦ç¿’(ディープラーニング)ã‚’Webブラウザ上ã‹ã‚‰æ‰‹è»½ã«è¡Œã†ãŸã‚ã®ã‚ªãƒ¼ãƒ—ンソース・ソフトウェアã€ã€ŒDEEPstation(ディープステーション)ã€ã‚’ã¤ã„ã«å…¬é–‹ã—ã¾ã—ãŸã€‚ç¾åœ¨ã€Githubより誰ã§ã‚‚ダウンãƒãƒ¼ãƒ‰ã—ã¦ä½¿ç”¨ã™ã‚‹ã“ã¨ãŒå‡ºæ¥ã¾ã™(https://github.com/uei/deepstation)。 DEEPstationã¯ã€ãƒ‡ã‚£ãƒ¼ãƒ—ラーニングを手軽ã«å®Ÿé¨“ã™ã‚‹ãŸã‚ã®GUIベースã®ã‚¢ãƒ—リケーションã§ã€ä»¥ä¸‹ã®ã‚ˆã†ãªç‰¹å¾´ãŒã‚ã‚Šã¾ã™ã€‚ 国産ディープラーニングフレ
第1回　人工知能ブームã®å®Ÿæƒ… | gihyo.jp
今回ã‹ã‚‰äººå·¥çŸ¥èƒ½ã‚’活用ã—ãŸãƒ“ジãƒã‚¹ã«ã¤ã„ã¦ã®é€£è¼‰ã‚’ã™ã‚‹ã“ã¨ã«ãªã‚Šã¾ã—ãŸã€‚よã‚ã—ããŠé¡˜ã„ã„ãŸã—ã¾ã™ã€‚ ビジãƒã‚¹ã¨ã„ã£ã¦ã‚‚ã„ã‚ã„ã‚ã‚ã‚Šã¾ã™ãŒã€ç§ãŒä»£è¡¨ã‚’å‹™ã‚る会社ã¯ECマーケティング分野ã®ãŸã‚ã€ãƒžãƒ¼ã‚±ãƒ†ã‚£ãƒ³ã‚°é–¢é€£ã®è©±é¡ŒãŒå¤šããªã‚‹ã¨æ€ã„ã¾ã™ã€‚ 人工知能ã®åŸºç¤ŽçŸ¥è˜ãƒ»2016 ã¾ãšä»Šå›žã¯ç¬¬1回ã¨ã„ã†ã“ã¨ã§äººå·¥çŸ¥èƒ½ã®åŸºç¤ŽçŸ¥è˜ã§ã™ã€‚ ãã‚‚ãã‚‚ãªãœäººå·¥çŸ¥èƒ½ã®é€£è¼‰ã‚’æŒã¤ã“ã¨ã«ãªã£ãŸã‹ã¨ã„ã†ã¨ã€ãã‚Œã¯ä»ŠãŒç©ºå‰ã®ï¼Ÿäººå·¥çŸ¥èƒ½ãƒ–ームã ã‹ã‚‰ã«ã»ã‹ãªã‚Šã¾ã›ã‚“。ãã®ã‚ッカケã¯ä½•ã‹ã¨ã„ã†ã¨ã€ãã‚Œã¯ãƒ‡ã‚£ãƒ¼ãƒ—ラーニングã¨ã„ã£ã¦è‰¯ã„ã§ã—ょã†ã€‚ 実際ã€ãƒ‡ã‚£ãƒ¼ãƒ—ラーニング分野ã§ã¯å¤§ããªæŠ€è¡“çš„é©æ–°ãŒã‚ã‚Šã¾ã—ãŸã€‚ãã®ãŸã‚大ããªæ³¨ç›®ã‚’集ã‚ã‚‹ã®ã¯è‡ªç„¶ãªã“ã¨ã§ã‚ã‚‹ã¨ã„ãˆã¾ã™ã€‚ 具体的ãªæˆæžœã¨ã—ã¦ã¯ã€ç”»åƒèªè˜çŽ‡ã®é£›èºçš„ãªå‘上を始ã‚ã¨ã™ã‚‹ç”»åƒå‡¦ç†ã«é–¢ã™ã‚‹ã‚‚ã®ãŒä¸å¿ƒã§ã™ã€‚ã‚‚ã¡ã‚ã‚“ã€ãƒ‡ã‚£ãƒ¼ãƒ—ラーニングãŒç”»åƒã—ã‹æ‰±ãˆãªã„ã¨ã„ã†ã“ã¨ã¯ã‚ã‚Šã¾ã›ã‚“ã—ã€å®Ÿéš›è‡ª
オープンイノベーションãŒèµ·ã“る背景ã¯ï¼Ÿ AIã¨æ©Ÿæ¢°å¦ç¿’ã®é•ã„ã¯ï¼Ÿ ã“ã‚Œã‹ã‚‰ã®ä¼æ¥ã«å¿…è¦ãªè¦–点を考ãˆã‚‹
『MarkeZineã€ãŒä¸»å‚¬ã™ã‚‹ãƒžãƒ¼ã‚±ãƒ†ã‚£ãƒ³ã‚°ãƒ»ã‚¤ãƒ™ãƒ³ãƒˆã€ŽMarkeZine Dayã€ã€ŽMarkeZine Academyã€ã€ŽMarkeZine プレミアムセミナーã€ã® æœ€æ–°æƒ…å ±ã‚’ã¯ã˜ã‚ã€æ§˜ã€…ãªã‚¤ãƒ™ãƒ³ãƒˆæƒ…å ±ã‚’ã¾ã¨ã‚ã¦ã”紹介ã—ã¾ã™ã€‚ MarkeZine Day
文系エンジニアã ã‘ã©AIを勉強ã—ã¦ã¿ã‚‹ - learning.ikeay.net
ã“ã‚“ã«ã¡ã¯ã€@ikeayã§ã™ã€‚ çªç„¶ã§ã™ãŒã€æœ€è¿‘ã™ã£ã‹ã‚Šäººå·¥çŸ¥èƒ½ï¼ˆAI）ãŒãƒã‚ºãƒ¯ãƒ¼ãƒ‰ã«ãªã£ã¦ãã¦ã„ã¾ã™ãï¼ ã“ã“最近ã ã‘ã§ã‚‚ã€Googleã®AlphaGoãŒä¸–界トップ棋士ã§ã‚るイ・セドルæ°ã«å‹åˆ©ã—ãŸã“ã¨ãŒä¸–ã®ä¸ã®è©±é¡Œã‚’ã‹ã£ã•ã‚‰ã£ã¦ã„ã£ãŸã®ã‚’皮切りã«ã€ãƒ¬ãƒ³ãƒ–ラントã£ã½ã„絵を生æˆã™ã‚‹ã‚„ã¤ã¨ã‹ã€1æžšã®çµµã‚’組ã¿åˆã‚ã›ã¦1æžšã®çµµã‚’ã¤ãã‚‹ã‚„ã¤ã¨ã‹ã€è‡ªå‹•ã§Jazzを生æˆã™ã‚‹DeepJazzã ã¨ã‹etc, etc... ã“ã†ã—ã¦ã¿ã‚‹ã¨ã€ã“ã®æŠ€è¡“ã§ã»ã‚“ã¨ã«è·å¤±ã„ãã†ã ã—ã€èŠ¸è¡“ã¨ã¯ãªã‚“ãžã‚„ã¨ã„ã†ã“ã¨ã«ãªã‚Šãã†ã ã—ã€äººé¡žæ»…ã¼ã•ã‚Œã‚‹ã‹ã‚‚ã—ã‚Œãªã„ã—（å見）ã€ã‚‚ã†ã»ã‚“ã¨æ€–ã„ã—ã¤ã‚‰ã„ã§ã™ã‚ˆãー。 特ã«æœ€è¿‘ã¯AI絡ã¿ã§æ¯Žæ—¥ä½•ã‹ã—らã®ãƒ‹ãƒ¥ãƒ¼ã‚¹ãŒã‚ã‚‹ã®ã§ã€æ—¥ã€…ヒヤヒヤã—ã¦ã¾ã™ã€‚（ã‚ã€TechFeedã£ã¦ãƒ†ã‚¯ãƒŽãƒã‚¸ãƒ¼ã«ç‰¹åŒ–ã—ãŸæƒ…å ±ã‚ュレーションサービスãŒã‚ã‚‹ã‚“ã§ã™ã‘ã©ã€ãã‚Œã§ã€Œäººå·¥çŸ¥èƒ½ã€ã¨ã‹ã€Œæ·±å±¤å¦ç¿’ã€ã¨ã‹ã‚’登録ã—ã¦ãŠãã¨æ¯Žæ—¥
1
ランã‚ング
ãŠçŸ¥ã‚‰ã›
ランã‚ング
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
GitHub - CompVis/stable-diffusion: A latent text-to-image diffusion model
https://unsupervisedmethods.com/my-curated-list-of-ai-and-machine-learning-resources-from-around-the-web-9a97823b8524
ã€å…¥é–€:教養ã¨ã—ã¦ã®äººå·¥çŸ¥èƒ½ã€‘ 人工知能ã¨ã¯ä½•ã‹? 機械å¦ç¿’ã€æ·±å±¤å¦ç¿’ã®é•ã„ã¨ã¯?
{{#tags}}- {{label}}
{{/tags}}