Googleは検索の基本構造をアップグレードしようとしているものの、この件を極秘に進めようとしてもいるようだ。 GoogleのエンジニアであるSitaram Iyer氏およびMatt Cutts氏は、同社の公式ブログ「Webmaster Central」への投稿で、一般のユーザーはアップグレードによる違いにさえ気づかないだろうと記している。 「この数カ月の間、Google社内の大規模な開発チームが、Googleのウェブ検索の次世代アーキテクチャという極秘の開発プロジェクトに取り組んできた」と書き込まれているものの、全体的には何らかの謎に満ちたワークショップのような響きがある。「その規模、インデックス速度、正確さ、わかりやすさ、他の分野において、これまでの枠組みを打ち破っていくプロセスの第一歩となっている」とも記されている。だが、ユーザーインターフェースは変わっていない。 多くの開発者に対し

株式会社ジーワンシステムの代表取締役。 新しいものを生み出して世の中をあっといわせたい。イノベーションってやつ起こせたらいいな。 リクエストがあったので、OracleでN-Gram（今回は2-Gram バイグラム）で顧客を抽出するSQL＆ストアドプロシージャを作ってみました。 全文検索ではありますが、Googleなどであればキーワードとキー（GoogleはURL）ごとにあらかじめスコアリングしています。それで、実際には上から×××件（スコアーの低いコンテンツは無視され漏れる）という仕組みになりますが、50万人ぐらいの顧客の中から、特定の顧客を特定するような処理であれば、スコアリングはできないし漏れることはマズイのでそれほど高速にはできません。たかだか50万件ではもともと速いから、パフォーマンス的にはあまり効果はないかも。 また、N-Gramは、ゴミを拾い易い検索方式ですが、チューニングしだ

米Yahooの長い悪夢は終わった。何年にもわたる、うわさ、交渉、どんでん返しの末、ついに検索事業をMicrosoftに押し付けた。今やYahooがするべきことは、次に起こることを見極めることだけだ。 Yahooの新時代は、最高経営責任者（CEO）のCarol Bartz氏が、同社の巨大なウェブサイトネットワークでの検索を運用する権利をMicrosoftに譲るという文書に署名した瞬間に始まった。その見返りに、YahooはMicrosoftの「Bing」が生み出す売り上げの88％を受け取る。今やYahooは、まず何よりもメディア企業であり、できるだけ多くの人を自社のサイトに呼び込んで、そのページ上で利益率の高い広告を販売することが事業となる。 この戦略は、インターネットでは必ずしもうまくいっていない。広告主が潜在顧客に到達する方法としては、検索広告の方がはるかに効果的であり、広告主はそれに応え

Yahoo!とMicrosoft、検索事業の提携を発表 [速報] ヤフーとマイクロソフトが検索事業での業務提携を発表。 公開日時：2009年07月29日 21:33 米Yahoo!と米Microsoftは2009年7月29日、検索事業における提携合意を発表した。今回の提携でYahoo!は検索エンジンにBing（ビング）を採用し、ポータル事業に経営資源を集中する。[詳細版：Yahoo!、検索エンジンBingを採用] 両社の検索シェアが合算されることで、Googleの代替となる新たな検索マーケットプレースが生まれ、広告主はこの独占的な会社に依存することがなくなるとし、また、MicrosoftにYahoo!の検索ボリュームが加わることで、サイズとスケールを獲得して検索市場に競争と発展を生み出すことができると説明する。 提携合意の内容 ※　適当に翻訳しています　正しいものは後ほど ・提携期間は10

はじめまして はじめまして。サラリーマンの保利と申します。今回から数回にわたってインターネット上のサービスと著作権法との関係についてお話をさせていただくことになりました。どうぞよろしくお願いいたします。 さて、みなさまもご承知の通り、ネット上にはありとあらゆるサービスがあふれています。検索エンジンやネットオークション、ブログ、音楽配信、動画投稿、…などなど。どれも大変便利で魅力的なサービスなのですが、ネット上で提供されているサービスのほとんど全ては「著作権法」という一筋縄ではいかないルールと折り合いをつける必要があります。 そこでこの連載では、ネット上で提供されている代表的なサービスを毎回1つ取り上げ、そのサービスが著作権法上、どのような課題やリスクを抱えているのか、運営するにあたって、どのような作業や権利処理が必要とされるのか、そのあたりの裏側のしくみについてお話していこうと思います。

MS Bing、ユニークユーザ数8%増加、スタートは好調 マイクロソフトがBingローンチ1ヶ月後の経過報告。Bingユニークユーザ数は8%増加、Bing Travelトラフィックは90%増加、Bing Shoppingは訪問者数3倍増加など。 公開日時：2009年07月20日 13:13 米Microsoftは2009年7月13日、検索エンジンBing（ビング）リリース1ヶ月の経過報告を公式ブログで行った。同社によると、Bingユニークユーザ数が8%増加、Bingを他のユーザに勧めると回答した人の数は2倍に増えたという。 ショッピングエンジンBing Shoppingは訪問者数が3倍に増加、Bing経由で商品購入するとキャッシュバックが得られるBing cashbackの取引数は5.42%増加した。通常、夏はオンラインショッピングがそれほど延びない季節であり、この結果は意味があると同社は

情報インフラの発展に伴い，私たちが接する情報の絶対量は増加の一途をたどっています。そのため，目的とする情報をすばやくピンポイントで入手するのが困難な状況も増えています。 一方で情報提供側にとっても，情報を確実に利用者に届けることがビジネスの成功に重要な要素となってきており，これを実現するための努力が日々続けられています。 このような状況で，高速で柔軟性が高い検索処理のニーズが高まってきており，全文検索エンジンが注目を集めています。ここでは，オープンソースの全文検索エンジンである「Lucene/Solr」を紹介します。 Lucene/Solrとは Lucene/Solrは，Apache Software Foundation（ASF）のLuceneプロジェクトで開発されているソフトです。LuceneはPure Javaで実装された全文検索エンジンで，単独では実行不可能なライブラリの形式で提供

MS Bing 検索シェア, 2009年6月は4.99% - 米Hitwise調査 Hitwiseによる米国の検索エンジンシェア。Bingは4.99%で前月より1.5%シェア上昇。 公開日時：2009年07月07日 02:44 米調査会社Hitwiseは米国における2009年6月27日までの4週間の検索シェアを発表した。検索数ベースのシェアは、Google (www.google.com）が74.04%、Yahoo! (search.yahoo.com)が16.19%、Bing (www.bing.com）が4.99%だった。前月同データは、Google 73.52%、Yahoo! 15.61%、search.msn.com (Live Search) 3.54%だったので、Bingは検索シェアが1%以上伸びたことになる。 Hitwise 2009, http://www.hitwise.

Microsoftは過去2カ月にわたり、「Kumo」という開発コード名を付けた新たな検索技術の社内テストを実施してきた。だが現在、「Live Search」のアップデートの一環となるデザイン変更の一部で、限定的な公開テストが行われている。 非公式のMicrosoftエバンジェリストを名乗るRyan Rea氏は米国時間5月15日、Live Searchの検索結果ページが従来のデザインではなく、Kumoのスクリーンショットによく似たデザインで表示されたと語った。特に注目すべきは、Kumoの主な特徴である左側のナビゲーション枠だ。 Rea氏によると、「Windows 7」リリース候補版（RC）の「Internet Explorer（IE）8」でLive Searchを使用したところ、これまでとは違うデザインの検索結果ページが表示され始めたという。 筆者がRea氏と同じ条件で試したところ、従来の検

中国百度、ディープウェブを検索可能にする搜索开放平台プラットフォーム公開 中国百度（baidu）がサイト運営者から提供される構造化データを共有してインビジブルウェブ（見えないウェブコンテンツ）を検索可能にするAladingプラットフォームを開設。 公開日時：2009年04月26日 16:42 中国最大手の検索エンジン・百度（バイドゥ）がディープウェブ（Deep Web）を検索可能にするためのプラットフォーム「搜索开放平台」（Alading platform）を立ち上げた。 百度搜索开放平台は、インターネット上に存在するが検索エンジンのクローラがインデックスできないディープウェブ（Deep WebあるいはInvisible Web）を検索可能にするためのプラットフォーム。 サイト運営者が搜索开放平台を利用する際は次の3つの手続きを行う。まず第1に、百度にデータを共有するために、検索対象とする

そろそろ落ち着いて来たころ合いなので、はてなブックマーク全文検索機能の裏側について書いてみることにします。 PFI側は、8月ぐらいからバイトに来てもらっているid:nobu-qと、id:kzkの2人がメインになって進めました(参考: 制作スタッフ)。数学的な所は他のメンバーに色々と助言をしてもらいました。 はてな側は主にid:naoyaさんを中心に、こちらの希望や要求を聞いて頂きました。開発期間は大体1〜2か月ぐらいで、9月の上旬に一度id:naoyaさんにオフィスに来て頂いて合宿をしました。その他の開発はSkypeのチャットで連絡を取りながら進めてました。インフラ面ではid:stanakaさん、契約面ではid:jkondoさん、id:kossyさんにお世話になりました。 全文検索エンジンSedue 今回の検索エンジンはSedue(セデュー)という製品をベースにして構築しています。Sedu

あなたは、ある特定の話題について専門的な知識を有しているだろうか？それならば、Googleに良い計画がある。 Googleの公式ブログによれば、GoogleのWikipedia対抗サービスとなる「Knol」が、米国時間7月23日午前に一般公開された。 Knolは、特定のトピックについて、その話題の専門家が記した記事の集合体である。 Googleは、The New Yorker誌と提携し、どの著者も漫画を、同誌から自分のKnol記事に追加可能にした。Knolの著者は、自分の記事に広告を掲載することも可能で、Googleから売り上げの一部を受け取ることもできる。 KnolがWikipediaと異なっているのは、どの記事にも著名な執筆者または一群の執筆陣が存在している点である。 KnolのプロダクトマネージャーであるCedric Dupont氏は、CNET Newsとのインタビューにおいて「著作

弊社森（オラの上司）が大阪市立大学で発表をしてきました。 発表資料は以下からどぞー。 検索エンジンの歴史的意義と未来 発表の前半は、コミュニケーション技術の歴史を踏まえ、 多対1のコミュニケーション技術として検索エンジンを捉える試みです。 発表の後半は、コミュニケーション技術としての検索エンジンが 現在どのような課題を抱えているか、 本来検索エンジンとはどうあるべきか、について語られています。 発表者の森と、 「検索エンジンは情報を減らすための技術だから面白い」と 盛り上がって話した記憶があります。 (ちばてつやの看板がある渋谷の中華料理店で) 大変面白い資料ですので、是非一読をオススメいたします。

映画『シン・ゴジラ』評――修羅が再び日本を壊す・後編 (徳丸無明のブログ) ららら科学の子――我等が内なる鉄腕アトム① (徳丸無明のブログ) 「あれはだれの歌」やなせたかし (粋な提案) 【映画/調査】『風立ちぬ』 主人公を演じる庵野秀明さんはアリ37.6%、ナシ62.4%･･･「話題作りの素人起用はやめて欲しい」の声 (芸スポ総合＋) 映画「プロメテウス」この創造世界を大スクリーンで楽しみたい (soramove) 『第9地区』 (観・読・聴・験　備忘録) 「ワシントン・ナショナル・ギャラリー展」 (弐代目・青い日記帳　) 新江ノ島水族館　入場料 (noncolle) 枝野長官、気象庁拡散予測は「私の気づかないところで止まっていた」 (世事熟視〜コソダチP（気分は冥王星）) 「ドガ展」 (弐代目・青い日記帳　) 今回のテーマは、検索エンジン。 ■『爆笑問題のニッポンの教養』（番組ＨＰより

国立情報学研究所（NII）は2月28日、Yahoo！JAPANの検索語データを研究用に無償提供することでヤフーと合意したと発表した。大規模な検索語データの研究利用は国内初としており、新しい検索技術の研究が進むと期待している。 文部科学省が補助するプロジェクト「情報爆発時代に向けた新しいIT基盤技術の研究」（代表・喜連川優東京大教授）に参加する研究者に、NIIを通じて4月から提供する。 Yahoo！検索の検索語から、実際に検索された上位1万件の検索語と検索回数を抽出して提供する。NIIは「現実の検索エンジンに投入される検索語の特徴の分析が進めば、新しい検索手法の研究への大きなインパクトが期待できる」としている。 3月3日に東京・秋葉原で説明会を開く。試作システムのデモなども行う。

Preferred Infrastructureは、最先端の文字列検索アルゴリズムを利用し、あいまい検索処理を高速に実現する検索エンジン「Sedue Flex」を発表した。10％から20％の誤りを許した全文検索を、Gバイト級のデータに対しても数ミリ秒～数秒のオーダーで検索可能。 Preferred Infrastructureは3月5日、最先端の文字列検索アルゴリズムを利用し、あいまい検索処理を高速に実現する検索エンジン「Sedue Flex」を発表した。ゲノム解析やノイズの含まれたデータに対する検索など、高速・高度なあいまい検索機能を必要とするユーザーがターゲットとなる。 同エンジンは、同社が開発した全文検索技術「Sedue」をベースにしたもので、最新のアルゴリズムを利用することでゲノムや音声データなどの検索に必要とされる「あいまい全文検索」を高速な処理できる検索エンジン。あいまい全文検

ヤフー検索（YST）、インデックス＆アルゴリズムを更新開始 (07/09/27) Yahoo!検索がインデックスとアルゴリズムをアップデート。ダイナミックURLリライトに対応。 公開日時：2007年09月27日 01:04 ヤフー検索（YST）がインデックスとアルゴリズムの更新を開始した模様だ。前回の更新から35日。米WebmasterWorldなどで米Yahoo! Searchの更新が確認されているほか、日本でも多数のキーワードでの大幅な順位変動が確認されている。まだヤフーブログでの公式発表は行われていない。 [UPDATE 1] 米Yahoo! Search公式ブログにて、YSTのインデックスおよびランキングアルゴリズムのアップデートが発表された。このアップデートはまもなく完了する見込み。また、今回のアップデートは先日発表されたダイナミックURLの書き換えに対応したとのこと。サイト運営

情報大航海プロジェクト、モデルサービス実施企業にモバイルジャッジやチームラボなどを8社を選定 経済産業省が情報大航海プロジェクト2007年度モデルサービス実施企業を8社選定。チームラボ、ブログウォッチャー、モバイルジャッジ、沖電気工業など。 公開日時：2007年07月26日 07:04 経済産業省は2007年7月25日、2007年度「情報大航海プロジェクト」モデルサービス実施企業について8件を採択したと発表した。 情報大航海プロジェクトは大量の情報の中から必要な情報を的確に検索・解析するための技術を開発するとともに、それらを用いた先進的な「モデルサービス」を実証することにより、技術の普及・展開を目指すもの。公募は2回に分けて実施されており、第1回ではNTTどこもと日本航空インターナショナルが採択されている。 今回の第2回目の公募は2007年4月18日から6月16日において実施、37件の応募