日本オラクルが「Oracle Secure Enterprise Search」を，グーグルが「Google検索アプライアンス」を，住友電工情報システムが「QuickSolution」を提供するなど，製品の動きは活発である。 メーカーの動きが活発化しているのは，検索エンジンに対する企業のニーズが再燃しているからだ。以前は「社内のナレッジを生かしたい」など漠然とした理由で検索エンジンを導入する事例も多かったが，最近では「RDB内の顧客マスターと，グループウエア内の顧客サポート情報，ファイル・サーバー上の営業日誌をくし刺しにして検索し，顧客管理システムに統合したいなど，業務上の明確な意図に基づいて導入されている」（ジャストシステム システム営業推進グループ 商品企画・推進 三谷安世氏）。 [知る]構成要素は三つ，言語解析の方法に特性あり ここで採り上げる検索エンジンは，次の3要素で構成される（

突然ですが、穴埋めクイズです。下線部に入る単語はなんでしょう? グーグルで_____ おそらく、「検索」「調べる」「探す」といった単語を思いつくのではないでしょうか？ 実際に、Webにあるドキュメントをくまなく調べ、「グーグルで」の後にくる単語を調べると、「検索」が1位であるとがわかります。 一般に、直前の(N-1)個の単語を見て、次の単語を予測するモデルをN-gram言語モデルといいます。さきほどは、「グーグル」 と 「で」の2単語から次を予想しているので、3-gram言語モデルの例となります。現時点の単語が、直前の(N-1)個のみに影響を受けるという仮説は、一見現実離れしているようですが、実際には非常に有効な場合も多く、かな漢字変換、OCRのエラー訂正、機械翻訳、音声認識などに広く用いられています。たとえば、音声認識の場合、ノイズ等で現時点の単語をシステムが聞き取れなくても、言語モデル

ヤフーは6月18日、開発者向けサイト「Yahoo!デベロッパーネットワーク」において、日本語の文章を解析できるAPI「日本語形態素解析Webサービス」を公開した。 日本語形態素解析Webサービスは、ヤフーの日本語処理技術部がYahoo! JAPAN研究所と共同で開発を進めてきた形態素解析エンジン「Web MA」を社外の開発者向けにAPIとして公開するもの。このエンジンは、ヤフーのブログ検索や商品検索などのテキスト処理、ブログ検索の「評判検索機能」、「まとめ検索機能」などのテキストマイニング処理にも利用されている。 このAPIを利用することで、開発者は解析対象となる日本語の文章を形態素に分割し、品詞や読み、基本形を取得できるほか、対象となる文章に多く含まれている単語、その文章を構成する特徴的な単語などを把握することが可能だ。 また、すでに公開済みのAPIから取得したデータを解析することもでき

はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28

ヤフーは2月28日、ブログ検索の新機能をリリースした。検索した単語がブログでどのような評判になっているかを検索できる「評判情報検索」機能や、検索結果を自動的にトピックごとに分けて表示する「まとめ検索」機能などがある。 評判情報検索機能はブログに投稿された記事の中から、「良い」などの評価を表す語句を抽出、解析して、「ポジティブ」「ネガティブ」などに分類し、円グラフとともに関連する記事を表示する。 「評判検索サービスはすでにいくつかあるが、スポーツなど分野を限定しているものが多い。確かにそのほうが精度は上がるが、ユーザーニーズとしては『面白い情報が知りたい』とか、『自分が興味あるトピックがどんなふうに話題になっているかが知りたい』というものが多いので、あえて対象分野を絞っていない」（ヤフー検索事業部企画部プロデューサーの七里康敏氏） まとめ検索機能は、ヤフー日本法人が開発した類似文書の自動分類

キーウォーカーは10月18日、ブログに書かれた文章の意味を解析し、ブロガーの属性をグラフなどで表示するブログ解析エンジン「BlogSphere」のアルファ版を公開した。 キーウォーカーは人工知能の技術を応用して自社で開発した「日本語自然文意味検索エンジン」を採用した ブログ検索サイト「KEYWALKERブログ検索」を2006年3月に公開している。 今回発表したBlogSphereは、同社のブログ検索の技術開発をさらに進めたものだ。従来のKEYWALKERブログ検索では、キーワードを入力して検索すると、その検索キーワードを含んだブログ記事が一覧表示されるだけだったが、BlogSphereではそれに加えて、検索キーワードを含むブログを書いたブロガーの属性情報を分析し、グラフなどでビジュアル化して表示する。 BlogSphereアルファ版では、約3000万ページのブログ記事から、ブロガーの男女比

日本語意味解析エンジンを開発するSematicsは6月15日、統計的確率論を用いた言語解析エンジン「Perceptron Engine」を開発したと発表した。統計的確率論を用いた日本語解析エンジンは「世界初」（同社）という。 Perceptron Engineは「形態素解析」、「構文解析」、「文脈解析」、「意味解析」の4つの解析処理によって構成される。従来の言語解析技術は、辞書によるデータのマッチングにより処理されていたため、データ容量が膨大で、その処理に多大な時間を要した。一方、Perceptron Enginesは大規模な辞書を用いないため、少ないメモリやディスク容量でも高速処理が可能で、500文を1秒で解析できるという。 形態素解析とは、文章を形態素と呼ばれる、意味を持つ語句の最小単位まで分割して解析するもの。各語句を品詞単位、動詞や形容詞といった活用語句の場合はその活用形ごとに解析

三井物産はニューズウォッチと提携し、コンテンツマッチ広告の分野に進出する。ニューズウォッチが持つ日本語解析技術を利用して、コンテンツと広告の関連性を高め、この分野で先行するグーグルのAdSenseに対抗する。 サービス名は「Co-match（コマチ）」。三井物産の子会社で、インターネットマーケティングサービス事業を手がける三井物産ヴィクシアが販売を担当する。三井物産ヴィクシアは、これまで三井物産が手がけていたメールマーケティングサービスのmiemsやリスティング広告サービスのLISTOPを引き継いで2月に設立されたばかりだ。Co-matchはLISTOPと連動したサービスで、当初はLISTOPの顧客を中心に販売する。 コンテンツマッチ広告とは、サイトやブログの文章を解析し、その内容に近い広告を掲載するというもの。通常のバナー広告やテキスト広告に比べてクリックレートが高いとされている。ニュー

印刷する メールで送る テキスト HTML 電子書籍 PDF ダウンロード テキスト 電子書籍 PDF クリップした記事をMyページから読むことができます 言語工学研究所は5月11日、検索時のキーワードを提案するソフトウェア「ご提言SEO」の販売を、2006年5月11日より開始することを発表した。 ご提言SEOは、検索時に意図した記事が見つけられない場合に適切なキーワードを提案するソフトウェア。同ソフトウェアを使用することで、キーワードを入力したときに、ご提言SEOが意味的に類似した言葉を自動的に表示してくれる。 これまでの同種のシステムでは、過去に入力されたキーワードを表示するだけだったが、ご提言SEOではソーラスに基づく、同義語、狭義語、広義語、関連語などを意味の近い順に表示し、その中から一番適した検索用語を選択できる。使用されているシソーラスには26万語が登録されている。 動作環境は