2007年3月26日
中国産の新検索エンジン「百度 Baidu」の検索評価を試みました
1. 検索エンジンの評価データ
.
2. 検索結果の評価
評価は上記の表に示しました。検索結果の評価は、AクラスがmooterとGoogle、BクラスがYahoo!とBaidu、CクラスがAsk.jpとLive、DクラスがMarsFlagとSagoolとみなせます。
.
前回に続き、mooterがGoogleを抑えてトップです。新設のBaiduは後発にもかかわらず、4位です。データ収集時のトラブルで、満足なデータを得ていないようです。トラブルが解決し、データ量が増えたときに結果がよくなるかどうかはわかりません。
.
なお、今回からfreshEYEを評価対象から外しました。前回の調査では、mooterとfreshEYEとの相関係数が0.92でしたが、今回の調査時では0.96と非常に高くなったからです。50調査キーのうち、10位まで一致するのが9キー、順位が少し入れ替わるのが19キーでした。現在の評価システムではfreshEYEを対象外にせざるを得ませんでした。悪しからずご了承ください。
.
Yahoo!、mooter、freshEYEはいずれも検索エンジンinktomiから発展したものです。そこで、Yahoo!とmooterとの相関係数を求めたところ0.77となり、あまり相関がないことが分かりました。そして、多くのケースで順位は異なっていました。したがって、mooterとYahoo!は別物と判定しました。
.
3. 検索数について
検索数は毎週収集し、「データ」に公表しています。新たにBaiduを調査対象にしました。Baiduの検索数は非常に多く、まだ未知の部分があるため、Web全体からの検索数としました。
.
4. 総合評価について
総合評価は、検索結果評価 対 検索数の比率を4対1にし、トップを100に指数化しました。この結果、1位 Google、2位 mooter、3位 Yahoo!、4位 Baidu、5位 Ask.jp、6位 Live、7位 MarsFlag、8位 Sagool、になりました。
.
5. 検索エンジン間の関係
前回と同様に、検索エンジン間の相関を求めました。表は、Googleの検索結果に近いのは、mooter、live、Yahoo!、を示します。代替検索エンジンとして利用できます。
.
検索エンジン間で相関の高いのは、mooterとlive間の0.83、Googleとmooter間の0.81、mooterとYahoo!間の0.77、でした。
.
6. 調査キーと総合評価との関係
各調査キーと総合評価との相関を求め、相関の高い順に並べ替えました。その結果、相関が高いのは「コミック、科学、ニュース、ゲーム、郵便」、逆に相関が低いのは、「芸能、スポーツ、思い出、cancer、再就職」でした。
.
.
| 2007.3.26 | mooter | Yahoo! | Baidu | Ask.jp | Live | MarsFlag | Sagool | |
| 検索結果 | 95.2 | 100.0 | 89.1 | 86.8 | 76.4 | 75.3 | 50.8 | 33.7 |
| 検索数 | 100.0 | 54.1 | 92.9 | 57.3 | 75.7 | 37.7 | 20.0 | 8.0 |
| 総合評価 | 100.0 | 94.4 | 93.4 | 84.1 | 79.3 | 70.4 | 46.4 | 29.7 |
2. 検索結果の評価
評価は上記の表に示しました。検索結果の評価は、AクラスがmooterとGoogle、BクラスがYahoo!とBaidu、CクラスがAsk.jpとLive、DクラスがMarsFlagとSagoolとみなせます。
.
前回に続き、mooterがGoogleを抑えてトップです。新設のBaiduは後発にもかかわらず、4位です。データ収集時のトラブルで、満足なデータを得ていないようです。トラブルが解決し、データ量が増えたときに結果がよくなるかどうかはわかりません。
.
なお、今回からfreshEYEを評価対象から外しました。前回の調査では、mooterとfreshEYEとの相関係数が0.92でしたが、今回の調査時では0.96と非常に高くなったからです。50調査キーのうち、10位まで一致するのが9キー、順位が少し入れ替わるのが19キーでした。現在の評価システムではfreshEYEを対象外にせざるを得ませんでした。悪しからずご了承ください。
.
Yahoo!、mooter、freshEYEはいずれも検索エンジンinktomiから発展したものです。そこで、Yahoo!とmooterとの相関係数を求めたところ0.77となり、あまり相関がないことが分かりました。そして、多くのケースで順位は異なっていました。したがって、mooterとYahoo!は別物と判定しました。
.
3. 検索数について
検索数は毎週収集し、「データ」に公表しています。新たにBaiduを調査対象にしました。Baiduの検索数は非常に多く、まだ未知の部分があるため、Web全体からの検索数としました。
.
4. 総合評価について
総合評価は、検索結果評価 対 検索数の比率を4対1にし、トップを100に指数化しました。この結果、1位 Google、2位 mooter、3位 Yahoo!、4位 Baidu、5位 Ask.jp、6位 Live、7位 MarsFlag、8位 Sagool、になりました。
.
5. 検索エンジン間の関係
前回と同様に、検索エンジン間の相関を求めました。表は、Googleの検索結果に近いのは、mooter、live、Yahoo!、を示します。代替検索エンジンとして利用できます。
.
| No. | 検索サイト | 1 | 2 | 3 | No. | 検索サイト | 1 | 2 | 3 |
| 1 | mooter | live | Yahoo! | 5 | Ask.jp | mooter | Baidu | live | |
| 2 | mooter | live | Yahoo! | 6 | Live | mooter | Yahoo! | ||
| 3 | Yahoo! | mooter | Live | 7 | MarsFlag | mooter | Live | Yahoo! | |
| 4 | Baidu | Ask.jp | Live | 8 | Sagool | Baidu | Live |
.
6. 調査キーと総合評価との関係
各調査キーと総合評価との相関を求め、相関の高い順に並べ替えました。その結果、相関が高いのは「コミック、科学、ニュース、ゲーム、郵便」、逆に相関が低いのは、「芸能、スポーツ、思い出、cancer、再就職」でした。
.
2007年2月28日
日本語検索エンジンmooterが健闘しています
1. 検索エンジンの評価データ
.
2. 検索結果の評価
評価は従来の方法で実施しました。50種類の調査キーに対して、各検索エンジンの10位までの検索結果をベースにしました。その際に、検索結果のレイアウトや紹介文の良し悪しは考慮していません。
.
検索評価の結果は、1位のmooter、2位のGoogleとfreshEYE、4位のYahoo!がトップクラスとみなせます。昨年オープンしたmooterがGoogleを抑えてトップになりました。mooterの規模はGoogleとは異なりますが、Googleに対抗できる検索エンジンの登場とみなせます。今後の進展に注目したいと思います。 次に、5位のLiveと6位のAsk.jpはミドルクラスで、それから間をおいて、7位のMarsFlag、8位のSagoolが続きます。新しいLive Searchは、Web検索のノウハウを蓄積している段階とみなせます。
.
3. 検索数について
検索数は毎週収集し、「データ」に公表しています。調査日時がGoogleの更新と重なるためか、Googleの検索数が大きく変化します。トップのため、他の検索サイトの検索数の指数に影響し、変化がなくても指数が変化してしまいます。
.
4. 総合評価について
総合評価は、検索結果評価 対 検索数の比率を4対1にし、トップを100に指数化しました。この結果、1位 Google、2位 mooter、3位 freshEYE、4位 Yahoo!、5位 Ask.jp、6位 Live、7位 MarsFlag、8位 Sagool、になりました。
.
なお、検索デスクの「ホーム」と「検索」のWeb検索の配置はこの順に変更しました。
.
5. 検索エンジン間の関係
検索する場合、1つの検索エンジンしか使わない人、複数の検索エンジンを使う人などさまざまです。ここでは、検索エンジン間の相関を求めました。表は、Googleの検索結果に近いのは、mooter、Yahoo!、freshEYE、を示します。代替検索エンジンとして利用できます。
.
検索エンジン間で相関の高いのは、mooterとfreshEYEの0.92、Googleとmooterの0.89、mooterとYahoo!の0.88、でした。
.
6. 調査キーと総合評価との関係
各調査キーと総合評価との相関を求め、相関の高い順に並べ替えました。その結果、相関が高いのは「釣り、コミック、科学、辞書、ファッション」、逆に相関が低いのは、「芸能、電子政府、スポーツ、2005年、Window」でした。
.
.
| 2007.2.28 | mooter | freshEYE | Yahoo! | Ask.jp | Live | MarsFlag | Sagool | |
| 検索結果 | 90.4 | 100.0 | 90.4 | 87.2 | 70.9 | 71.5 | 48.8 | 45.3 |
| 検索数 | 100.0 | 48.1 | 61.7 | 70.2 | 61.2 | 31.1 | 20.0 | 8.1 |
| 総合評価 | 100.0 | 97.4 | 93.5 | 90.9 | 78.3 | 70.7 | 55.3 | 43.1 |
2. 検索結果の評価
評価は従来の方法で実施しました。50種類の調査キーに対して、各検索エンジンの10位までの検索結果をベースにしました。その際に、検索結果のレイアウトや紹介文の良し悪しは考慮していません。
.
検索評価の結果は、1位のmooter、2位のGoogleとfreshEYE、4位のYahoo!がトップクラスとみなせます。昨年オープンしたmooterがGoogleを抑えてトップになりました。mooterの規模はGoogleとは異なりますが、Googleに対抗できる検索エンジンの登場とみなせます。今後の進展に注目したいと思います。 次に、5位のLiveと6位のAsk.jpはミドルクラスで、それから間をおいて、7位のMarsFlag、8位のSagoolが続きます。新しいLive Searchは、Web検索のノウハウを蓄積している段階とみなせます。
.
3. 検索数について
検索数は毎週収集し、「データ」に公表しています。調査日時がGoogleの更新と重なるためか、Googleの検索数が大きく変化します。トップのため、他の検索サイトの検索数の指数に影響し、変化がなくても指数が変化してしまいます。
.
4. 総合評価について
総合評価は、検索結果評価 対 検索数の比率を4対1にし、トップを100に指数化しました。この結果、1位 Google、2位 mooter、3位 freshEYE、4位 Yahoo!、5位 Ask.jp、6位 Live、7位 MarsFlag、8位 Sagool、になりました。
.
なお、検索デスクの「ホーム」と「検索」のWeb検索の配置はこの順に変更しました。
.
5. 検索エンジン間の関係
検索する場合、1つの検索エンジンしか使わない人、複数の検索エンジンを使う人などさまざまです。ここでは、検索エンジン間の相関を求めました。表は、Googleの検索結果に近いのは、mooter、Yahoo!、freshEYE、を示します。代替検索エンジンとして利用できます。
.
| No. | 検索サイト | 1 | 2 | 3 | No. | 検索サイト | 1 | 2 | 3 |
| 1 | mooter | Yahoo! | freshEYE | 5 | Ask.jp | freshEYE | Yahoo! | MarsFlag | |
| 2 | mooter | freshEYE | Yahoo! | 6 | Live | mooter | Yahoo! | ||
| 3 | freshEYE | mooter | Live | 7 | MarsFlag | Ask.jp | Live | mooter | |
| 4 | Yahoo! | mooter | Live | 8 | Sagool | Yahoo! | Live |
.
6. 調査キーと総合評価との関係
各調査キーと総合評価との相関を求め、相関の高い順に並べ替えました。その結果、相関が高いのは「釣り、コミック、科学、辞書、ファッション」、逆に相関が低いのは、「芸能、電子政府、スポーツ、2005年、Window」でした。
.