気に入った記事をブックマーク
- 気に入った記事を保存できます
保存した記事の一覧は、はてなブックマークで確認・編集ができます
- 記事を読んだ感想やメモを書き残せます
- 非公開でブックマークすることもできます
形態素解析もどきを改良してみた
35 users
ablog.seesaa.net
ablog.seesaa.net
ablog.seesaa.net
注目コメント算出アルゴリズムの一部にLINEヤフー株式会社の「建設的コメント順位付けモデルAPI」を使用しています
形態素解析もどきを改良してみた 「JavaScript で形態素解析もどき」を少し改良してみました。今までは... 形態素解析もどきを改良してみた 「JavaScript で形態素解析もどき」を少し改良してみました。今までは漢字、ひらがな、カタカナ、英数字、記号などで分けていただけなので、 「今日はいい天気でした。」 という文章を解析すると 「今日｜はいい｜天気｜でした｜。」 となって、「はいい」などと変な区切りができたりしていました。 そこで、助詞で区切ってから、その後で漢字、ひらがな、などで分けるようしてみました。そうすると 「今日｜は｜いい｜天気｜で｜した｜。」 という感じで分けることができます。 ただ、 「とても大きい」 という文章だと 「と｜て｜も｜大｜きい」 となってしまったりで、問題もありますが。 JavaScript のソースはこんな感じです。 function SimpleAnalyzer() { this.re = new RegExp; this.re.compile("[一-龠々
ablog.seesaa.net
ablog.seesaa.net
ablog.seesaa.net
ablog.seesaa.net
373news.com
nordot.app
anond.hatelabo.jp
huyukiitoichi.hatenadiary.jp
www.eisbahn.jp
qiita.com
zenn.dev/gamella
applech2.com
qiita.com/ahera
techblog.enechain.com
www.gizmodo.jp
2010/11/15 リンク