GitHub - microsoft/BlingFire: A lightning fast Finite State machine and REgular expression manipulation library.

テクノロジーカテゴリーの変更を依頼記事元:

github.com/microsoft

15users がブックマークコメント

コメント

2

記事へのコメント2件

注目コメント
新着コメント

braitom Bingで使われている自然言語のトークナイザー。

2019/04/19 リンク

RabbitBit Microsoft BingのTokenizerとして使っているなら、NLTKの10倍の速度と言われても、納得。

2019/04/18 リンク

注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています

規約違反を報告

アプリのスクリーンショット

いまの話題をアプリでチェック！

バナー広告なし
ミュート機能あり
ダークモード搭載

アプリをダウンロード

関連記事

{{ total_bookmarks_with_user_postfix }}{{ root_title }}

GitHub - microsoft/BlingFire: A lightning fast Finite State machine and REgular expression manipulation library.

Bling Fire Tokenizer provides state of the art performance for Natural Language text tokenization... Bling Fire Tokenizer provides state of the art performance for Natural Language text tokenization. Bling Fire supports the following tokenization algorithms: Pattern-based tokenization WordPiece tokenization SentencePiece Unigram LM SentencePiece BPE Induced/learned syllabification patterns (identifies possible hyphenation points within a token) Bling Fire provides uniform interface for working wi

ブックマークしたユーザー

laughing2019/04/22
tofu_cider2019/04/22
Nyoho2019/04/19
slay-t2019/04/19
azechi_n2019/04/19
y_tag2019/04/19
tamrin0072019/04/19
oddvolume2019/04/19
braitom2019/04/19
RabbitBit2019/04/18

同じサイトの新着

同じサイトの新着をもっと読む

いま人気の記事

いま人気の記事をもっと読む

いま人気の記事 - テクノロジー

いま人気の記事 - テクノロジーをもっと読む

新着記事 - テクノロジー

新着記事 - テクノロジーをもっと読む

いま人気の記事 - 企業メディア

企業メディアをもっと読む

設定を変更しましたx