PyTorch® 2.2リリース ー SDPA性能2å€ã€AOTInductorã«ã‚ˆã‚‹éžPython環境ã¸ã®å±•é–‹ãŒå¯èƒ½ã«
PyTorchãƒãƒ¼ãƒ ã¯1月31æ—¥ã€PyTorch® 2.2ã®ãƒªãƒªãƒ¼ã‚¹ã‚’発表ã—ãŸã€‚新機能や最é©åŒ–ãŒç››ã‚Šã ãã•ã‚“ã®ã“ã®ãƒãƒ¼ã‚¸ãƒ§ãƒ³ã¯ã€ã‚¨ãƒ³ã‚¸ãƒ‹ã‚¢ãŸã¡ã®æœŸå¾…ã‚’å分ã«æº€ãŸã™ãƒªãƒªãƒ¼ã‚¹ã 。 PyTorch 2.2ã§ã¯ã€FlashAttention-v2ã®çµ±åˆã«ã‚ˆã‚Šã€SDPA（_scaled_dot_product_attention_）ã®ãƒ‘フォーマンス㌠約2å€å‘上 ã—ãŸã€‚ã“ã‚Œã«ã‚ˆã‚Šã€A100 GPUsã§æœ€å¤§FLOPs/sã®ç´„50-73%ã¾ã§åˆ°é”ã™ã‚‹é«˜é€ŸãªSDPAãŒå®Ÿç¾ã•ã‚ŒãŸã€‚ æ–°ã—ã„機能ã¨ã—ã¦ã¯ã€éžPythonサーãƒãƒ¼ã‚µã‚¤ãƒ‰å‘ã‘ã®AOTInductorも導入。ã“ã‚Œã«ã‚ˆã‚Šã€PyTorchプãƒã‚°ãƒ©ãƒ ã®ã‚³ãƒ³ãƒ‘イルã¨ãƒ‡ãƒ—ãƒã‚¤ãƒ¡ãƒ³ãƒˆãŒå¯èƒ½ã«ãªã‚Šã€éžPython環境ã§ã®åˆ©ç”¨ãŒå‘上ã—ãŸã€‚ ãã®ä»–ã«ã‚‚ã€Optimizersã®ã‚µãƒãƒ¼ãƒˆå‘上や新ã—ã„ãƒã‚°ãƒ¡ã‚«ãƒ‹ã‚ºãƒ TORCH_LOGSã®è¿½åŠ ãªã©ã€å¤šãã®æ”¹è‰¯ãŒè¡Œã‚ã‚ŒãŸã€‚一方ã§
TALQu 深層å¦ç¿’ç³»èªã¿ä¸Šã’ソフト フリー/ドãƒãƒ¼ã‚·ãƒ§ãƒ³ã‚¦ã‚§ã‚¢ - Haruqaã®ã‚½ãƒ•ãƒˆã‚¦ã‚§ã‚¢ã¨ã‹ - BOOTH
深層å¦ç¿’ç³»èªã¿ä¸Šã’ソフトã§ã™ ã„ã‚ゆるAIç³»TTSã¨ã„ã†ã‚‚ã®ã§ã™ TALQuå…¬å¼ã‚µã‚¤ãƒˆï¼š https://haruqa.github.io/TALQu/ [PR] ã“ã“ã‹ã‚‰ãƒ€ã‚¦ãƒ³ãƒãƒ¼ãƒ‰ã§ãる通常TALQuã®ä¸Šä½ç‰ˆã€ã€ŒTALQuPROã€ã‚’FANBOXã®æ”¯æ´è€…é™å®šã§é…布ã—ã¦ã„ã¾ã™ã€‚ã²ã¨æœˆå®šé¡ã®ã‚µãƒ–ã‚¹ã‚¯æ–¹å¼ https://haruqa.fanbox.cc/ ※TALQuPROã®åˆ©ç”¨ãƒ©ã‚¤ã‚»ãƒ³ã‚¹å–得方法ãŒå¢—ãˆã¾ã—ãŸâ€» ã¯ã‚‹ã½ãƒ©ãƒœã® https://discord.gg/FkQZEUVsKs ã²ã¨æœˆå®šé¡ã¯ã‚‹ã½(ã¯ã‚‹ã½ã‚µãƒ–スク)ã‹ã‚‰ã‚‚利用å¯èƒ½ã§ã™ã€‚ ã¯ã‚‹ã½ã«ã¤ã„㦠https://docs.google.com/spreadsheets/d/1uZuKp1m154w0sCPBoxarWeXsWZtvlGQaqYTO34lKNdM/edit?usp=sharing TALQu3ã‹ã‚‰ã®PROé™å®šæ©Ÿèƒ½ã¨ã—ã¦
Webサイト開発特化型AIサービスã®Webエンジニアを募集ï¼
Tsunagu.AI（ツナグドットエーアイ）ã§ã¯ã€Webサイト開発特化型AIサービス「FRONT-END.AIã€ã®Webエンジニアを募集ã—ã¦ãŠã‚Šã¾ã™ã€‚
ソニーã®Neural Network Consoleã§ç”»åƒèªè˜ãƒ¢ãƒ‡ãƒ«ã‚’ノーコードã§ä½œæˆã—ã¦ã¿ãŸ | Ledge.ai
サインインã—ãŸçŠ¶æ…‹ã§ã€Œã„ã„ãã€ã‚’押ã™ã¨ã€ãƒžã‚¤ãƒšãƒ¼ã‚¸ã® 「ã„ã„ãå±¥æ´ã€ã«ä¸€è¦§ã¨ã—ã¦ä¿å˜ã•ã‚Œã¦ã„ãã®ã§ã€ å†åº¦èªã¿ãŸããªã£ãŸæ™‚ã‚„ã€ã‚ã¨ã§ã˜ã£ãã‚Šèªã¿ãŸã„ã¨ãã«ä¾¿åˆ©ã§ã™ã€‚
世界モデル | æ±äº¬å¤§å¦æ¾å°¾ãƒ»å²©æ¾¤ç ”究室（æ¾å°¾ç ”）- Matsuo Lab
AIã¯ã„ã‹ã«ä¸–界をæ‰ãˆã‚‹ã®ã‹ 今後ã®AIç ”ç©¶ã®éµã¨ãªã‚‹ 「世界モデルã€ã‚’å¦ã¼ã†ï¼ 深層å¦ç¿’ã®é ˜åŸŸã§è¿‘年急速ã«ç ”究ãŒé€²ã‚られã¦ã„る「世界モデルã€ã¯ã€ä»Šå¾Œã®äººå·¥çŸ¥èƒ½ã®éµã¨ãªã‚‹ãƒˆãƒ”ックã¨ã—ã¦æ³¨ç›®ã•ã‚Œã¦ã„ã¾ã™ã€‚本講座ã§ã¯ã€ä¸–界モデルを軸ã«ã€æœ€æ–°ã®æ·±å±¤å¦ç¿’技術を身ã«ã¤ã‘ã‚‹ã“ã¨ã‚’目指ã—ã¾ã™ã€‚ æ±äº¬å¤§å¦Deep Learning基礎講座・応用講座を公開ã—ã¦ããŸæ¾å°¾ãƒ»å²©æ¾¤ç ”究室ãŒå…¨é¢çš„ã«æ¼”習コンテンツを監修・作æˆã—ã¦ã„ã¾ã™ã€‚ 「世界モデルã€ã¨ã¯ã€AIエージェントをå–ã‚Šå·»ã環境ã®ãƒ¢ãƒ‡ãƒ«ã‚’観測ã‹ã‚‰å¦ç¿’ã«ã‚ˆã£ã¦ç²å¾—ã™ã‚‹æž 組ã¿ã‚’指ã—ã¾ã™ã€‚世界モデルã¯ã€æ·±å±¤å¦ç¿’ã®é ˜åŸŸã§è¿‘年急速ã«ç ”究ãŒé€²ã‚られã¦ãŠã‚Šã€ä»Šå¾Œã®äººå·¥çŸ¥èƒ½ã®éµã¨ãªã‚‹ãƒˆãƒ”ックã¨ã—ã¦æ³¨ç›®ã•ã‚Œã¦ã„ã¾ã™ã€‚ 本講座ã§ã¯ã€ä¸–界モデルを軸ã«æœ€æ–°ã®æ·±å±¤å¦ç¿’技術を身ã«ã¤ã‘ã‚‹ã“ã¨ã‚’目指ã—ãŸè¬›ç¾©ã‚’è¡Œã„ã¾ã™ã€‚講義ã®å‰åŠã§ã¯ã€æ·±å±¤ç”Ÿæˆãƒ¢ãƒ‡ãƒ«ã€ãƒ¢ãƒ‡ãƒ«ãƒ™ãƒ¼ã‚¹å¼·åŒ–å¦ç¿’ã€Transform
Next-Generation Pose Detection with MoveNet and TensorFlow.js
https://blog.tensorflow.org/2021/05/next-generation-pose-detection-with-movenet-and-tensorflowjs.html https://blogger.googleusercontent.com/img/b/R29vZ2xl/AVvXsEj234Pcu7Tprg7dTlqiHbcAejxBjrre4hR94tVXevyCQ0jd4EKQ5dQiV25-uuq1Z-ad2QWEdXzdieUZ2JwetwbGIyUl3JDpARqHec5Jw_HVDzgFt8jC14pAW_wpz77sZig1k3AymPnTgR8/s0/three_pane_aligned+%25281%2529.gif May 17, 2021 — Posted by Ronny Votel and Na Li, Google Rese
オープンソースã®æ©Ÿæ¢°å¦ç¿’ライブラリ「TensorFlow 2.3ã€ãŒãƒªãƒªãƒ¼ã‚¹
「TensorFlow 2.3ã€ã§ã¯ã€ãƒ‡ãƒ¼ã‚¿ã®ãƒãƒ¼ãƒ‰ã¨å‰å‡¦ç†ã‚’ã•ã‚‰ã«å®¹æ˜“ã«ã—ã€1å°ã®ãƒžã‚·ãƒ³ã§ä½œæ¥ã—ã¦ã„ã‚‹å ´åˆã§ã‚‚ã€è¤‡æ•°ã®ãƒžã‚·ãƒ³ã§ä½œæ¥ã—ã¦ã„ã‚‹å ´åˆã§ã‚‚ã€å…¥åŠ›ãƒ‘イプラインã®ãƒœãƒˆãƒ«ãƒãƒƒã‚¯ã‚’解決ã™ã‚‹æ–°ãŸãªæ©Ÿèƒ½ãŒè¿½åŠ ã•ã‚Œã¦ã„る。 「tf.dataã€ã§ã¯ã€å…¥åŠ›ãƒ‘イプラインã®ãƒœãƒˆãƒ«ãƒãƒƒã‚¯ã‚’解決ã—ã¦ãƒªã‚½ãƒ¼ã‚¹ä½¿ç”¨çŽ‡ã‚’改善ã™ã¹ãã€ãƒˆãƒ¬ãƒ¼ãƒ‹ãƒ³ã‚°ã‚¸ãƒ§ãƒ–ã¨ä¸¦è¡Œã—ã¦å®Ÿè¡Œã•ã‚Œã‚‹ãƒ‡ãƒ¼ã‚¿å‡¦ç†ãƒ¯ãƒ¼ã‚«ãƒ¼ã®CPUクラスターã«å…¥åŠ›å‰å‡¦ç†ã‚’オフãƒãƒ¼ãƒ‰ã—ã¦ã€ã‚¢ã‚¯ã‚»ãƒ©ãƒ¬ãƒ¼ã‚¿ã®ä½¿ç”¨çŽ‡ã‚’å‘上ã™ã‚‹æ–¹æ³•ãŒæä¾›ã•ã‚ŒãŸã»ã‹ã€å…¥åŠ›å‰å‡¦ç†ãƒ‘イプラインã®å‡ºåŠ›ã‚’ディスクã«ä¿æŒã™ã‚‹ã“ã¨ãŒã§ãるスナップショットAPIãŒè¿½åŠ ã•ã‚ŒãŸã€‚ ã¾ãŸã€ŒTF Profilerã€ã§ã¯ã€ãƒ¢ãƒ‡ãƒ«ã®ãƒ¡ãƒ¢ãƒªä½¿ç”¨é‡ã‚’å¯è¦–化ã™ã‚‹ãƒ¡ãƒ¢ãƒªãƒ—ãƒãƒ•ã‚¡ã‚¤ãƒ©ã¨ã€ãƒ¢ãƒ‡ãƒ«å†…ã®Python関数呼ã³å‡ºã—をトレースã§ãã‚‹PythonトレーサãŒè¿½åŠ ã•ã‚Œã¦ã„る。 ã»ã‹ã«ã‚‚ã€Keras Preprocessing L
深層å¦ç¿’ãŒè‹¦æ‰‹ãªã€Œäºˆæ¸¬ã€ã‚’å…‹æœã§ãã‚‹ã‹ï¼Ÿã€€ãƒ¡ã‚¿å¦ç¿’「ConvCNPã€
医者ãŒè¨ºæ–ã™ã‚‹éš›ã€ä¸€ã¤ã®è¡€æ¶²æ¤œæŸ»ã®æ•°å€¤ã ã‘ã§ã¯ç—…æ°—ã®ç‰¹å®šã¯é›£ã—ã„。ã ãŒæ¤œæŸ»é …目を増やã—ã¦ã„ãã“ã¨ã§ã€ç—…æ°—ã®ç‰¹å®šã¯ã‚ˆã‚Šç¢ºå®Ÿæ€§ã‚’増ã—ã¦ã„ã。ã“ã®ã‚ˆã†ã«ã€äººã¯ãƒ‡ãƒ¼ã‚¿ã‚’増やã™ã“ã¨ã§äºˆæ¸¬ã®ç²¾åº¦ã‚’上ã’ã‚‹ã“ã¨ãŒã§ãる。åŒæ§˜ã«AIã®äºˆæ¸¬ã«ä¸ç¢ºå®Ÿæ€§ã‚’æŒãŸã›ã€è¦³æ¸¬ç‚¹ã‚’増やã™ã“ã¨ã§ãã®ä¸ç¢ºå®Ÿæ€§ã‚’減らã™æœ€æ–°ã®ç ”究ã®ä¸€ã¤ã‚’紹介ã—よã†ã€‚ AIã ã£ã¦ã€Œè‡ªä¿¡ãŒãªã„ã€ã“ã¨ã‚‚ã‚る。自分ãŒå¦ã‚“ã§ã„ãªã„ã“ã¨ã«ã¤ã„ã¦ã€Œäºˆæ¸¬ã›ã‚ˆã€ã¨è¨€ã‚ã‚ŒãŸã‚‰ãªãŠã•ã‚‰ã 。ã ãŒã“ã®ã€Œäºˆæ¸¬ã®ä¸ç¢ºå®Ÿæ€§ã€ã‚’減らã™ãŸã‚ã®ç ”究ãŒæ—¥é€²æœˆæ©ã§é€²ã‚“ã§ã„る（写真ã¯ã‚¤ãƒ¡ãƒ¼ã‚¸ï¼‰ ディープラーニングã®å¼±ç‚¹ã¨ã„ã‚ã‚Œã¦ã„ã‚‹ã‚‚ã®ã®ä¸€ã¤ã«ã€ã€Œãƒ‡ãƒ¼ã‚¿ãŒãªã‘ã‚Œã°äºˆæ¸¬ã‚„変æ›ãŒã§ããªã„ã€ç‚¹ãŒã‚る。ãŸã 実ã¯ã“ã‚Œã¯ã»ã¼èª¤è§£ã§ã€ç›´æŽ¥ã®ãƒ‡ãƒ¼ã‚¿ã‚’å¿…è¦ã¨ã—ãªã„ã€ã€Œãƒ¡ã‚¿å¦ç¿’ã€ã¨ã„ã†äºˆæ¸¬ãƒ¢ãƒ‡ãƒ«ã®ç ”究ãŒé€²ã‚“ã§ã„る（第10回「データãŒãªã„ã®ã«å¦ç¿’å¯èƒ½ï¼Ÿã€€æœ€å…ˆç«¯AI『メタå¦ç¿’ã€ãŒã‚¹ã‚´ã„ã€ã‚’å‚照）。 メタå¦ç¿’ã¯ã€ä¸€
Tensorflow.jsã‚’Nodejsã§é«˜é€ŸåŒ–ã—よã†ã¨ã—ãŸãŒã€æ—§åž‹CPUã§ã¯ã€WebGLã®æ–¹ãŒé«˜é€Ÿã ã£ãŸè©± - Qiita
Tensorflow.jsã‚’Nodejsã§é«˜é€ŸåŒ–ã—よã†ã¨ã—ãŸãŒã€æ—§åž‹CPUã§ã¯ã€WebGLã®æ–¹ãŒé«˜é€Ÿã ã£ãŸè©±C++Node.jsWebGLtensorflowjs Tensorflowjsã§2000å¹´ã‹ã‚‰ã®æ ªä¾¡ã‚’å…ƒã«ã€æ–°å€¤ï¼“本値ã®AI予測をブラウザã§è¡Œã£ã¦ã„ãŸãŒã€Nodejsã§é«˜é€ŸåŒ–ã§ããªã„ã‹ãƒˆãƒ©ã‚¤ã—ã¦ã¿ãŸã€‚CPUã¯æ¿€å¤ã®i5-650。 作æ¥æ‰‹é †ã¯ã€ã“ã¡ã‚‰å‚照。 https://randomwalkjapan.blogspot.com/2020/06/nodejstensorflow-how-to-setup.html プãƒã‚°ãƒ©ãƒ ã¯ã“ã¡ã‚‰ã€‚ https://github.com/tanakayutaka/Tensorflow.js-tools-/blob/master/Nodejs%20Tensorflow%20BM%20test çµè«–ã¯ã€ Nodejsã§Nodeジェãƒãƒªãƒƒã‚¯ã§ãªã„Tens
手書ãスケッãƒã‹ã‚‰ãƒªã‚¢ãƒ«é¡”ç”»åƒã‚’作æˆã€æ·±å±¤å¦ç¿’ã§ã€ŒDeepFaceDrawingã€
手書ãスケッãƒã‹ã‚‰ãƒªã‚¢ãƒ«é¡”ç”»åƒã‚’作æˆã€æ·±å±¤å¦ç¿’ã§ã€ŒDeepFaceDrawing〠2020-06-04 ä¸å›½ç§‘å¦é™¢ã¨é¦™æ¸¯åŸŽå¸‚大å¦ã«ã‚ˆã‚‹ç ”究ãƒãƒ¼ãƒ ãŒé–‹ç™ºã—ãŸã€ŒDeepFaceDrawingã€ã¯ã€æ‰‹æ›¸ãスケッãƒã‹ã‚‰ãƒªã‚¢ãƒ«ãªé¡”ç”»åƒã‚’生æˆã™ã‚‹æ·±å±¤å¦ç¿’フレームワークã 。 手書ãスケッãƒã‹ã‚‰ãƒªã‚¢ãƒ«é¡”を生æˆã™ã‚‹DeepFaceDrawing ã“ã®ã‚ˆã†ãªæ·±å±¤å¦ç¿’を用ã„ãŸã‚¹ã‚±ãƒƒãƒç”»åƒã‹ã‚‰ãƒªã‚¢ãƒ«ç”»åƒã¸ã®å¤‰æ›ã§ã¯ã€Image-to-Image Translation with Conditional Adversarial Nets [Isola et al. 2017] ãªã©ã§å®Ÿè¨¼ã•ã‚Œã¦ã„る。ã—ã‹ã—データ駆動型ã®æ€§è³ªä¸Šã€å®Ÿç”»åƒã¨ãã‚Œã«å¯¾å¿œã™ã‚‹ã‚¨ãƒƒã‚¸ãƒžãƒƒãƒ—ã®ãƒšã‚¢ã‹ã‚‰ãƒãƒƒãƒˆãƒ¯ãƒ¼ã‚¯ã‚’å¦ç¿’ã™ã‚‹ã“ã¨ãŒå¤šã„ãŸã‚ã€ãƒªã‚¢ãƒ«ãªé¡”ç”»åƒã‚’åˆæˆã™ã‚‹ãŸã‚ã«ã¯ã€å®Ÿç”»åƒã®ã‚¨ãƒƒã‚¸ãƒžãƒƒãƒ—ã«è¿‘ã„å“質ã®ãƒ†ã‚¹ãƒˆã‚¹ã‚±ãƒƒãƒãŒå¿…è¦ã¨ãªã‚‹ã€‚ãれを用æ„ã™ã‚‹
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
Hidet: An Open-Source Python-based Deep Learning Compiler
Anthropic announces key breakthrough in understanding behavior of artificial neural networks - SiliconANGLE
Microsoft Researchers Propose Neural Graphical Models (NGMs): A New Type of Probabilistic Graphical Models (PGM) that Learns to Represent the Probability Function Over the Domain Using a Deep Neural Network
Snowflake Ascent Japan - Snowflake
Manning
Privacy Preserving Deep Learning with AWS Nitro Enclaves
Deep Learning in Rust with GPU
How CrowdStrike Combines TensorFlow and Rust for Performance
Understanding Neural Network: A beginner’s guide - DataScienceCentral.com
When Not to Use Deep Learning - DataScienceCentral.com
{{#tags}}- {{label}}
{{/tags}}