「新è¦äº‹æ¥å–り組ã¿å®Ÿæ…‹èª¿æŸ»ã€ã‹ã‚‰è¦‹ãˆãŸæ–°è¦äº‹æ¥ã®æˆåŠŸã¨å¤±æ•—を分ã‘ã‚‹ã‚‚ã® | インサイト | アビームコンサルティング「新è¦äº‹æ¥å–り組ã¿å®Ÿæ…‹èª¿æŸ»ã€ã¯å£²ä¸Šé«˜200億円以上ã®è¦æ¨¡ã®ä¼šç¤¾ã«å‹¤ã‚ã‚‹ç›´è¿‘5å¹´ã§æ–°è¦äº‹æ¥é–‹ç™ºã«é–¢ä¸Žã—ãŸçµŒé¨“者を対象ã«2023å¹´9月11æ—¥～13æ—¥ã«ã‚¦ã‚§ãƒ–アンケートを実施ã—ã€620åã‹ã‚‰æœ‰åŠ¹å›žç”ã‚’å¾—ãŸã€‚ \r\n今回ã®èª¿æŸ»å›žç”者ãŒé–¢ä¸Žã—ãŸæ–°è¦äº‹æ¥ãŒã©ã®ãƒ•ã‚§ãƒ¼ã‚ºã¾ã§é€²ã‚“ã ã®ã‹ã®å›žç”çµæžœã¯å›³1ã®é€šã‚Šã§ã‚る。ã“ã®ã‚ˆã†ãªèª¿æŸ»ã§ã¯æ¯”較的ã†ã¾ãã„ã£ãŸæ¡ˆä»¶ã«é–¢ã‚ã£ãŸæ–¹ãŒç©æ¥µçš„ã«å›žç”ã™ã‚‹å‚¾å‘ãŒã‚ã‚‹ã¨ã¿ã¦ãŠã‚Šã€å®Ÿéš›ã«ãƒãƒ¼ãƒ³ãƒã¾ã§ã“ãŽã¤ã‘ãŸå‰²åˆã‚„é»’å—化をé”æˆã—ãŸå‰²åˆã¯ä¸–ã®ä¸ã®å®Ÿæ…‹ã‚ˆã‚Šã‚‚高ã‚ã«å‡ºã¦ã„ã‚‹ã“ã¨ãŒæŽ¨æ¸¬ã•ã‚Œã‚‹ã€‚注目ã™ã¹ãã¯æ§˜ã€…ãªè‹¦åŠ´ã‚’乗り越ãˆã¦ãƒãƒ¼ãƒ³ãƒã—ãŸæ¡ˆä»¶ã«ãŠã„ã¦ã‚‚åŠæ•°ä»¥ä¸Šã¯é»’å—化をé”æˆã§ãã¦ã„ãªã„ã¨ã„ã†çµæžœã§ã‚る。ã‚らãŸã‚ã¦æ–°è¦äº‹æ¥ã«ãŠã„ã¦é»’å—化をé”æˆã™ã‚‹ã“ã¨ã®é›£ã—ã•ã‚’èªè˜ã™ã‚‹çµæžœã¨ãªã£ãŸã€‚ \r\n"}}" id="commontext-36348856c7" class="cmp-
Evaluating LLM systems: Metrics, challenges, and best practices
RAGã®æ–°ã—ã„手法「CRAGã€ã‚’3分ã§ç†è§£ã™ã‚‹
LLMアプリケーションã®å®‰å®šæ€§ã‚’高ã‚ã‚‹ãŸã‚ã®ç²¾åº¦è©•ä¾¡ãƒ»æ”¹å–„
{{#tags}}- {{label}}
{{/tags}}