[HOME] → [通信]

ロボット型検索エンジン総合評価結果

検索デスクの評価では1位のinfoseekですが、ここでの評価は9位です。こんなに差があるとは思いませんでした。AND検索の能力が12の検索エンジンの中で最下位と極端に低いのが1つの理由です。1万件もヒットしてもすべてを見ることはできませんから通常はもっと絞り込んでから使うわけで、AND検索が最下位ということは検索力が最下位であると言っても良いと思います。

また検索デスクが正しければ1位であるはずの、単語検索も5位にすぎません。これにはからくりがあります。infoseekで、いずれかの語を含むで、1つの単語、「デュアルCPU」を検索すると、CPUは無視されて、「デュアル」を検索したのと同じ結果になりヒット件数がやたらと多くなります。他と条件が異なってしまうので、僕の評価では、インフォシークのデフォルトである、「すべての語を含む」になっています。しかし、検索ディスク経由でinfoseekを利用すると、「いずれかの語を含む」の方のオプションが選択されます。というわけで、検索デスクがインフォシークの罠にはまったというよりは、わざと、インフォシークが1位になるようにしてあると思えてきます。あるいは、infoseekが、検索デスクが使っている評価用のキーワードに過剰適応しているという可能性もあります。

最近気づいたのですが、infoseekではAND検索の場合は、ヒット件数が一定数を超えると、40000から始まる加工された値を返すようになりましたね。たとえば、38000件を超えると、y=40000+rnd()*11000みたいな感じの値を返しているようです。OR検索(いずれかのワードを含む)の場合には、実際の値を返しているように見えるのですが、キーワードを引数として、ヒット数を返す関数をhit()として表すと、hit(A)+hit(B)=hit(A or B)+hit(A and B)の関係が成り立つはずですが、infoseekではこの関係が破綻しています。つまり、AND検索に限らず、OR検索の値も信用できません。

2000/7/19

検索エンジンの返すhit数の精度についての検証

Altavistaも、ヒット件数を隠すようです。About 515,508 という値が何度も繰り返し登場しました。

2000/7/20

なお、infonavigatorのデフォルトも、「家系図」で検索しても「家系」で検索しても同じ結果になりました。

1文字の単語は扱えないという弱点があっても、総合1位になったRingringは卒業に伴って、消え去っています。(DOS/Vマガジンの情報によれば、TBSに 就職したそうです。)証券会社はYahoo株を買う代わりに、Ringringに投資するみたいなインテリジェントな行動はできないのでしょうか?

ringringは、土日は止まっていたりしますが、現在も稼働中でした。さらに、1文字キーワードも検索可能になっていました。

2000/7/19

誤字を修正しました。 2006/12/11

goo lycos infonaviには、ロシア語のページが出てきてしまう問題がありますが、別の問題なので、ここではそれを割り引かずに評価しています。(2000/3/23)

AltaVistaがRagingという新サービスを始めたということだったので、Ragingだけ再評価してみました。結果は良いものでした。他のも現時点で調べなおしてからでないと公正さにかけますが、(2000/5/10)

AND検索 13問

 

横浜 大阪 名古屋 京都 神戸 福岡 札幌

馬 魚 犬

家系 系図

日本 アメリカ 中国 フランス ドイツ タイ

馬 鼠

ビール ワイン コーヒー ラーメン ご飯 カレー

馬 魚 犬 猫 鳥 蛇

計算幾何学 独立成分解析

セミ 山羊 エビ

巡回セールスマン問題 特許

Excel FTEST バグ

i-Mode マイクロソフト NTT 料金 アメリカ

ニセ首相官邸 産業ロック製作所

AND検索小計

100%正規化

Raging

98%

100%

73%

100%

100%

54%

100%

7%

70%

56%

20%

14%

25%

63%

100%

(Ringring)

0%

0%

100%

0%

0%

100%

0%

65%

100%

100%

100%

0%

100%

51%

82%

goo ,yahoo

100%

19%

14%

34%

29%

51%

26%

22%

39%

53%

0%

100%

0%

37%

60%

lycos

56%

21%

11%

0%

60%

19%

17%

26%

9%

50%

0%

23%

50%

26%

42%

Altavista

87%

39%

47%

65%

38%

3%

37%

7%

28%

3%

0%

0%

0%

27%

43%

InfoNavigator

49%

9%

9%

21%

21%

42%

8%

26%

9%

56%

0%

43%

0%

22%

36%

OCNnavi

27%

4%

7%

9%

8%

12%

5%

100%

15%

25%

0%

60%

50%

25%

40%

Excite

36%

8%

14%

6%

16%

30%

12%

26%

9%

33%

20%

80%

25%

24%

39%

ODIN

47%

2%

17%

21%

3%

14%

4%

13%

7%

56%

20%

97%

75%

29%

46%

infoseek , MSN

0%

0%

13%

0%

0%

0%

0%

7%

9%

0%

0%

0%

0%

2%

4%

NETPLAZA

13%

9%

7%

8%

5%

4%

7%

11%

7%

22%

40%

34%

0%

13%

20%

Verno

20%

0%

6%

11%

0%

3%

0%

0%

7%

25%

0%

0%

0%

5%

9%

Fresheye

6%

1%

0%

2%

2%

2%

0%

7%

0%

8%

0%

6%

0%

3%

4%

 

単語検索 11問

 

1999

黄色

宇多田ヒカル

画像理解

ソフトピアジャパン

計算幾何学

ベクトル量子化

減色ソフト

灘のけんか祭り

松岡肇

均等色空間

単語検索小計

単語100%

単語とandの平均

100%

(Ringring)

0%

100%

100%

4%

100%

36%

72%

100%

100%

56%

100%

70%

100%

92%

100%

Raging

100%

79%

84%

5%

84%

39%

66%

39%

27%

19%

47%

54%

77%

88%

97%

goo ,yahoo

92%

33%

47%

8%

91%

52%

100%

51%

28%

38%

86%

57%

82%

65%

71%

lycos

57%

35%

47%

11%

79%

37%

74%

76%

39%

70%

92%

56%

81%

60%

66%

Altavista

0%

43%

34%

3%

72%

15%

5%

27%

17%

20%

36%

25%

35%

40%

44%

InfoNavigator

0%

47%

0%

5%

59%

28%

60%

51%

33%

60%

80%

38%

55%

43%

47%

OCNnavi

13%

7%

10%

100%

33%

100%

48%

9%

20%

100%

28%

43%

61%

47%

51%

Excite

16%

24%

29%

4%

36%

26%

42%

57%

25%

50%

26%

31%

44%

37%

40%

ODIN

13%

16%

14%

3%

46%

26%

44%

20%

43%

11%

43%

25%

36%

36%

39%

infoseek , MSN

1%

14%

57%

6%

2%

37%

72%

75%

39%

30%

96%

39%

56%

30%

33%

NETPLAZA

6%

5%

6%

0%

4%

3%

5%

16%

18%

18%

4%

8%

11%

14%

15%

Verno

7%

6%

5%

2%

13%

14%

22%

5%

11%

2%

21%

10%

14%

11%

13%

Fresheye

5%

3%

9%

0%

5%

2%

3%

7%

10%

9%

5%

5%

8%

6%

6%

無意味語検索

夢の中に出てきた無意味語「パスカス」を検索してみたのですが、gooの1件は意味がありました。OCNnaviの一致件数の多さは問題ですが、パスカスが0件だと、自動的にパスとカス間にスペースを入れてAND検索になってしまっている様です。つまり専門用語に強いと思ったのは勘違いだった様です。

「ネビッチ」は、ノイマンがつまらなさの単位として使っていたという言葉なのですが、ストイコビッチにちなんだサッカーファンのあだ名としての「〜ネビッチ」が多くヒットしたみたいです。(2000/5/12)

パスカス

ネビッチ

goo ,yahoo

1

空軍特殊部隊(パスカス)

0

lycos

0

0

raging

32

19

イーゴリ・スラブネビッチ 、ネビッチョ、アカネビッチ、ナカソネビッチ、オグオネビッチなど

Altavista

0

0

InfoNavigator

1

パスカルのミスタイプ

0

OCNnavi

1923

2

ヤスミンコ・ネビッチさん

Excite

1

0

ODIN

5

2

ネビッチョ

infoseek , MSN

0

0

NETPLAZA

4

オリンパスカスタマーサポート、ピリパスカス、コーパスカスタマーサービス、バースト回路バイパスカスタム

2

シュー・ネビッチェン、イーゴリ・スラブネビッチ

Verno

6

1

シェネビッチェン

Fresheye

1

ラス・チアパスカス

0

infoseekに新機能?

インフォシーク 黄色ブドウ球菌 を検索すると、連想ワードとあわせて検索というのが最後に出てきました。これって前からありましたっけ?せっかくなので検索してみました。

メチシリン 耐性 黄色 ブドウ 球菌

検索エンジン ヒット数
2000/7/19
再検索用
Ringring 870 メチシリン 耐性 黄色 ブドウ 球菌
Altavista 794 AltaVista - Web Results
Lycos 707 LYCOS Japan - 「メチシリン 耐性 黄色 ブドウ 球菌」の検索結果
goo 485 goo[グー]
Excite 389 Excite エキサイト サーチ結果 メチシリン AND 耐性 AND 黄色 AND ブドウ AND 球菌
infoseek 266 インフォシーク メチシリン 耐性 黄色 ブドウ 球菌
もぎたてgoo 252 もぎたてgoo[グー]
OCN navi 121 OCN navi -NTT DIRECTORY-
netplaza 86 「NETPLAZA」データ検索結果
fresheye 37 フレッシュアイ検索結果
Infonavi 15 InfoNavigator results
検索エンジンの評価方法について

数盲政治 現在の日本の法律では商用検索エンジンは著作権違反だそうです。2006/12/11追記

作成 不明 (2000/7?) - 更新 2006/12/11

通信ディレクトリ目次

Google
Web www.PAG1U.net

関連ディレクトリ

発明

個人情報

PC

関連サイト

matsuokahajimeのアンテナ

matsuokahajimeの日記

乱雑な本棚:反グローパリズム

 

 
 
 
 
 
 
 
 
 
 
seo

外部リンク

毎日新聞問題の情報集積wiki - この問題をとりあげたメディア(時系列順) 東京のキー局はそろって沈黙

 

HOME ネットワークディレクトリ (C)松岡肇