サクサク読めて、アプリ限定の機能も多数!
“今回の手法を利用することで行列演算に必要なかけ算の量を大幅に削減できるため、論文では「1bitの大規模言語モデル用の新たなハードウェア設計への扉を開く」と述べられています。 ”
misshiki のブックマーク 2024/03/01 14:17
Microsoftが1.58ビットの大規模言語モデルをリリース、行列計算を足し算にできて計算コスト激減へ[人工知能][Microsoft][自然言語処理]“今回の手法を利用することで行列演算に必要なかけ算の量を大幅に削減できるため、論文では「1bitの大規模言語モデル用の新たなハードウェア設計への扉を開く」と述べられています。 ”2024/03/01 14:17
このブックマークにはスターがありません。 最初のスターをつけてみよう!
gigazine.net2024/02/29
Microsoftの研究チームがモデルのウェイトを「-1」「0」「1」の3つの値のみにすることで大規模言語モデルの計算コストを激減させることに成功したと発表しました。 [2402.17764] The Era of 1-bit LLMs: All Larg...
65 人がブックマーク・9 件のコメント
\ コメントが サクサク読める アプリです /
“今回の手法を利用することで行列演算に必要なかけ算の量を大幅に削減できるため、論文では「1bitの大規模言語モデル用の新たなハードウェア設計への扉を開く」と述べられています。 ”
misshiki のブックマーク 2024/03/01 14:17
このブックマークにはスターがありません。
最初のスターをつけてみよう!