GitHub - kotaro-kinoshita/yomitoku: Yomitoku is an AI-powered document image analysis package designed specifically for the Japanese language.You signed in with another tab or window. Reload to refresh your session. You signed out in another tab or window. Reload to refresh your session. You switched accounts on another tab or window. Reload to refresh your session. Dismiss alert
日本語ã«ç‰¹åŒ–ã—ãŸOCRã€æ–‡æ›¸ç”»åƒè§£æžPythonパッケージ「YomiTokuã€ã‚’公開ã—ã¾ã—ãŸï½œKotaro.Kinoshita
ã¯ã˜ã‚ã«æœ€è¿‘ã€LLMã¸ã®RAGを用ã„ãŸæ–‡æ›¸ãƒ‡ãƒ¼ã‚¿ã®é€£æºç‰ã‚’目的ã«æµ·å¤–ã‚’ä¸å¿ƒã«OCRや文書画åƒè§£æžæŠ€è¡“ã«é–¢é€£ã™ã‚‹æ–°ã—ã„サービスãŒæ´»ç™ºã«ãƒªãƒªãƒ¼ã‚¹ã•ã‚Œã¦ã„ã¾ã™ã€‚ ã—ã‹ã—ã€ãã®å¤šãã¯æ—¥æœ¬èªžã‚’メインターゲットã«é–‹ç™ºã•ã‚Œã¦ã„ã‚‹ã‚ã‘ã§ã¯ã‚ã‚Šã¾ã›ã‚“。日本語文書ã¯ã€è‹±æ•°å—ã«åŠ ãˆã¦ã€ã²ã‚‰ãŒãªã€æ¼¢å—ã€è¨˜å·ãªã©æ•°åƒç¨®é¡žã®æ–‡å—ã‚’è˜åˆ¥ã™ã‚‹å¿…è¦ãŒã‚ã£ãŸã‚Šã€ç¸¦æ›¸ããªã©æ—¥æœ¬èªžãƒ‰ã‚ュメント特有ã®ãƒ¬ã‚¤ã‚¢ã‚¦ãƒˆã«å¯¾å‡¦ã™ã‚‹å¿…è¦ãŒã‚ã£ãŸã‚Šã¨æ—¥æœ¬èªžç‰¹æœ‰ã®é›£ã—ã•ãŒã‚ã‚Šã¾ã™ã€‚ ã§ã™ãŒã€ä»Šå¾Œã€æµ·å¤–ã®é–‹ç™ºè€…ãŒã“れらã®èª²é¡Œã«å¯¾å‡¦ã™ã‚‹ãŸã‚ã€æ—¥æœ¬ã®ãƒ‰ã‚ュメント画åƒè§£æžã«ç‰¹åŒ–ã—ãŸã‚‚ã®ã‚’リリースã™ã‚‹å¯èƒ½æ€§ã¯ä½Žãã€ã‚„ã¯ã‚Šè‡ªå›½ã®è¨€èªžå‘ã‘ã®ã‚µãƒ¼ãƒ“スã¯è‡ªå›½ã®ã‚¨ãƒ³ã‚¸ãƒ‹ã‚¢ãŒé–‹ç™ºã™ã¹ãã ã¨ç†è€…ã¯è€ƒãˆã¦ã„ã¾ã™ã€‚ ã‚‚ã¡ã‚ã‚“ã€Azure Document Intelligenceã‚’ã¯ã˜ã‚ã¨ã—ãŸã€ã‚¯ãƒ©ã‚¦ãƒ‰ã‚µãƒ¼ãƒ“スã®ãƒ‰ã‚ュメント解æžã‚µãƒ¼ãƒ“スã¯ã‚ã‚Šã¾ã™ãŒã€ã‚¯ãƒ©ã‚¦ãƒ‰ã‚’利用ã§ããªã„ユ
OCRã¯ã‚‚ã†ä¸è¦ï¼Ÿè¦–覚的特徴ã¨ãƒ†ã‚ストを高精度ã«æ‰ãˆã‚‹ï¼æ¬¡ä¸–代マルãƒãƒ¢ãƒ¼ãƒ€ãƒ«AIモデル『MPLUG-DOCOWL2ã€ç™»å ´ï¼ - Qiita
Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? æ ªå¼ä¼šç¤¾ulusageã®æŠ€è¡“ブãƒã‚°ç”ŸæˆAIã§ã™ï¼ä»Šå›žã¯ã€PDF解æžã¨ãƒ‰ã‚ュメントインテリジェンスã®æœ€å…ˆç«¯æŠ€è¡“ 「MPLUG-DOCOWL2〠ã«ã¤ã„ã¦ã€è§£èª¬ã—ã¦ã„ãã¾ã™ã€‚ã“ã®ãƒ¢ãƒ‡ãƒ«ã¯ã€é«˜è§£åƒåº¦ã®ãƒžãƒ«ãƒãƒšãƒ¼ã‚¸ãƒ‰ã‚ュメントを効率的ã‹ã¤æ£ç¢ºã«è§£æžã™ã‚‹æŠ€è¡“ã¨ã—ã¦æ³¨ç›®ã•ã‚Œã¦ã„ã¾ã™ã€‚特ã«ã€å¾“æ¥ã®OCR（光å¦æ–‡å—èªè˜ï¼‰ãƒ™ãƒ¼ã‚¹ã®è§£æžæ‰‹æ³•ãŒæŠ±ãˆã‚‹èª²é¡Œã‚’解決ã—ã€å¾“æ¥ã®OCR技術を必è¦ã¨ã›ãšã€æ–°ã—ã„水準ã®æ€§èƒ½ã¨åŠ¹çŽ‡ã‚’実ç¾ã—ã¾ã—ãŸã€‚ ã“ã®è¨˜äº‹ã§ã¯ã€æŠ€è¡“çš„ãªèƒŒæ™¯ã€MPLUG-DOCOWL2ã®æ§‹é€ ã¨é©æ–°æ€§ã€ä»–ã®æŠ€è¡“ã¨ã®æ¯”較ã€ãã—ã¦å…·ä½“çš„ãªãƒ‡ãƒ¢ãƒ³ã‚¹ãƒˆãƒ¬ãƒ¼ã‚·ãƒ§ãƒ³ã‚’交ãˆ
OCR処ç†ãƒ—ãƒã‚°ãƒ©ãƒ åŠã³å¦ç¿’用データセットã®å…¬é–‹ã«ã¤ã„㦠| NDLラボ
2022å¹´04月25æ—¥ NDLラボã®GitHubã‹ã‚‰ã€æ¬¡ã®2件を公開ã—ã¾ã—ãŸã€‚ライセンスや詳細ã«ã¤ã„ã¦ã¯ã€å„リãƒã‚¸ãƒˆãƒªã®READMEã‚’ã”å‚ç…§ãã ã•ã„。 NDLOCR 国立国会図書館（以下ã€ã€Œå½“館ã€ã¨ã—ã¾ã™ã€‚）ãŒä»¤å’Œ3年度ã«æ ªå¼ä¼šç¤¾ãƒ¢ãƒ«ãƒ•ã‚©AIソリューションズã«å§”託ã—ã¦å®Ÿæ–½ã—ãŸOCR処ç†ãƒ—ãƒã‚°ãƒ©ãƒ ã®ç ”究開発事æ¥ã®æˆæžœã§ã‚ã‚‹ã€æ—¥æœ¬èªžã®OCR処ç†ãƒ—ãƒã‚°ãƒ©ãƒ ã§ã™ã€‚ ã“ã®ãƒ—ãƒã‚°ãƒ©ãƒ ã¯ã€å›½ç«‹å›½ä¼šå›³æ›¸é¤¨ãŒCC BY 4.0ライセンスã§å…¬é–‹ã™ã‚‹ã‚‚ã®ã§ã™ã€‚ãªãŠã€æ—¢å˜ã®ãƒ©ã‚¤ãƒ–ラリç‰ã‚’利用ã—ã¦ã„る部分ã«ã¤ã„ã¦ã¯å¯›å®¹åž‹ã‚ªãƒ¼ãƒ—ンライセンスã®ã‚‚ã®ã‚’採用ã—ã¦ã„ã‚‹ãŸã‚ã€å•†ç”¨éžå•†ç”¨ã‚’å•ã‚ãšè‡ªç”±ãªæ”¹å¤‰ã€åˆ©ç”¨ãŒå¯èƒ½ã§ã™ã€‚ 機能ã”ã¨ã«7ã¤ã®ãƒªãƒã‚¸ãƒˆãƒªã«åˆ†ã‹ã‚Œã¦ã„ã¾ã™ãŒã€ä¸‹è¨˜ãƒªãƒã‚¸ãƒˆãƒªã®æ‰‹é †ã«å¾“ã†ã“ã¨ã§ã€Dockerコンテナã¨ã—ã¦æ§‹ç¯‰ãƒ»åˆ©ç”¨ã™ã‚‹ã“ã¨ãŒã§ãã¾ã™ã€‚ リãƒã‚¸ãƒˆãƒª : https://github.com/ndl-lab/
PC
2å€ã«ä¼¸ã°ã›ï¼ãƒãƒƒãƒ†ãƒªãƒ¼ã®å¯¿å‘½ 電力を無駄食ã„ã™ã‚‹ã‚¢ãƒ—リをæ¢ã‚ã‚‹ã€ä¸è¦ãªã‚‰ã‚¢ãƒ³ã‚¤ãƒ³ã‚¹ãƒˆãƒ¼ãƒ«ã‚‚検討 2024.11.20
æ–‡å—èªè˜ãƒ©ã‚¤ãƒ–ラリ okrabyte を使ã£ã¦S3ã«PUTã•ã‚ŒãŸç”»åƒã‚’AWS Lambdaã§æ–‡å—èªè˜ã™ã‚‹ - from scratch
ã“ã®ã‚¨ãƒ³ãƒˆãƒªã¯AWS Lambda Advent Calendar 2014 - Qiitaã®(本当ã¯9日目ã®)記事ã§ã™ã€‚ (ã¡ã‚‡ã£ã¨AWS Lambdaã®ã‚¢ã‚«ã‚¦ãƒ³ãƒˆå–å¾—ã«æ‰‹é–“å–ã£ã¦ã—ã¾ã£ã¦é…刻ã—ã¦ã—ã¾ã„ã¾ã—ãŸã€‚。ã™ã„ã¾ã›ã‚“。。) AWS Lambda ã¨ã¯ AWS Lambdaã¯AmazonãŒä½œã£ãŸæ–°ã‚µãƒ¼ãƒ“スã§ã‚ã‚Šã€S3ã®å¤‰æ›´ã‚„DynamoDBã®å¤‰æ›´ã‚’フックã—ã¦Node.jsã®é–¢æ•°ã‚’実行ã™ã‚‹ã¨ã„ã†ä»•çµ„ã¿ã«ãªã£ã¦ã„ã¾ã™ã€‚ã“れを使ã†ã¨ã€ä¾‹ãˆã°ãƒ‡ãƒ¼ã‚¿ãŒå¤‰æ›´ã•ã‚ŒãŸå¾Œã«Push Notificationを出ã—ãŸã‚Šã€S3ã«ã‚¢ãƒƒãƒ—ãƒãƒ¼ãƒ‰ã•ã‚ŒãŸç”»åƒã®ã‚µãƒ ãƒã‚¤ãƒ«ç”»åƒã‚’作æˆã—ãŸã‚Šã¨ã„ã£ãŸã“ã¨ãŒå¯èƒ½ã«ãªã‚Šã¾ã™ã€‚ 今回ã¯ã“ã®AWS Lambdaを使ã£ã¦S3ã§PUTã•ã‚ŒãŸç”»åƒã‹ã‚‰æ–‡å—èªè˜ã‚’ã—ã¦ã¿ã‚ˆã†ã¨ã„ã†è©¦ã¿ã§ã™ã€‚æ–‡å—èªè˜ã—ãŸçµæžœã‚’DynamoDBã¨ã‹ã«ç½®ã„ã¦æ¤œç´¢ã«åˆ©ç”¨ã™ã‚Œã°ã€ç”»åƒå†…ã«æ›¸ã‹ã‚ŒãŸæ–‡å—ã§æ¤œç´¢ã§ãるよã†
1
リリースã€éšœå®³æƒ…å ±ãªã©ã®ã‚µãƒ¼ãƒ“スã®ãŠçŸ¥ã‚‰ã›
最新ã®äººæ°—エントリーã®é…ä¿¡
j次ã®ãƒ–ックマーク
kå‰ã®ãƒ–ックマーク
lã‚ã¨ã§èªã‚€
eコメント一覧を開ã
oページを開ã
{{#tags}}- {{label}}
{{/tags}}