איפה מנועי החיפוש של פעם ואיפה גוגל?

לאור פריחתם המחודשת, לאחרונה, של מנועי החיפוש למיניהם, נתקפנו נוסטלגיה והחלטנו ללכת אחורה בזמן ולחזור לאותם מנועים וותיקים, בהם השתמשנו לפני שהמנוע של גוגל בא לעולם והשתלט בקלילות על התחום. האם הם עדיין קיימים? ואם כן, האם מסדי הנתונים שלהם מעודכנים ואפשר להפיק מהם ערך, או שהם סתם מאובנים חיים?

זקני האינטרנט זוכרים בוודאי שגם לפני יותר מאחת עשרה שנים, שוק מנועי החיפוש לא שקט על שמריו. היו מנועי חיפוש מוכרים וגדולים שכולם השתמשו בהם, כמו Altavista ו-Excite, היו הבטחות מפליגות לחיפוש עתידני עם שאילתות בשפה טבעית (בעזרת Ask Jeeves), חיפוש בכל טקסט הדף ולא רק במילות המפתח שהוגדרו עבורו (Webcrawler) או ריכוז של תוצאות מכל המנועים האחרים על ידי מנועי מטה-חיפוש כמו Dogpile או Mamma – "האמא של כל מנועי החיפוש".

עיון בתולדותיהם של מנועי החיפוש הישנים מעלה שכמעט אף אחד מהם לא נותר עצמאי: הם נקנו, נמכרו, התמזגו והועברו מיד ליד במשך השנים, לרוב בין חברות שעוסקות בחיפוש. מנוע AltaVista, לדוגמה, נפל בשנת 2003 לידיה של Yahoo! (לה סיפק שירותי חיפוש בראשית דרכו). עם זאת, הכתובות עדיין קיימות ועדיין משרתות את מטרתן המקורית.

ההכנות לניסוי

מתוך שישה-עשר המנועים שלפני גוגל, ברשימת מנועי החיפוש ההיסטורית שבויקיפדיה, בחרנו שמונה מוכרים במיוחד: Webcrawler, Infoseek, Lycos, Altavista, Excite, Dogpile, Hotbot ו-AskJeeves, ובכל אחד מהם הרצנו עשרה חיפושי טקסט פשוטים שנבחרו מראש, מתחומים מגוונים וברמות ספציפיות שונות ככל האפשר. כל החיפושים היו באנגלית מכיוון שלא כל המנועים יודעים להסתדר עם האותיות העבריות, וידענו מראש גם לאילו תוצאות לצפות עבור כל אחד מהם:

1. human anatomy - לא יזיק לדעת
2. Best Search engine - מי ייתן תוצאה אובייקטיבית?
3. Hampster dance - זו לא שגיאת כתיב, אלא מראשוני האתרים הוויראליים
4. Bing - מי שלא יודע מה זה, שיתבייש
5. jane zhang loving you - קליפ חביב מתוך "כוכב נולד" הסיני
6. The uncanny - מאמר מאת זיגמונד פרויד, וגם מונח שקשור לתיאוריה פסיכולוגית מודרנית
7. Britney spears - כי כולם מחפשים
8. Turrican II - משחק מיתולוגי למחשב האמיגה
9. Ido gendel - כל אחד מחפש את עצמו מדי פעם
10. Hairy spaceships - מנוע שימצא משמעות לזה יזכה בבונוס מיוחד

עבור כל חיפוש, בחנו את התוצאות שהתקבלו בדף הראשון (עם דגש חזק על הדירוג – ככל שהתוצאה מופיעה במקום גבוה יותר, היא צריכה להיות רלוונטיות יותר) ובדקנו עד כמה הן קולעות למטרה ומועילות. הבסיס להשוואה היה, כמובן, התוצאות שמתקבלות בגוגל.

התוצאות

מנוע Webcrawler, שנולד באפריל 1994, התקדם והפך למנוע מטה-חיפוש של גוגל, יאהו!, Live (כיום בינג) ו-Ask.com. בשנת 2001 הוא נקנה על ידי InfoSpace, שמחזיקה גם ב-Dogpile וב-Excite, ובשנת 2008 איבד אף את לוגו העכביש על הגלשן עמו זוהה. בנוסף, הוא התמסחר לגמרי. התוצאות הראשונות בחיפושים מסוימים, שאינן מופרדות בצורה בולטת מספיק מהשאר, הן ממומנות. ככל שמונחי החיפוש היו ממוקדים וידועים יותר, כך התוצאות היו מדויקות יותר. חמישה מונחים מתוך השמונה הניבו תוצאות טובות מאד בדירוגים העליונים, ועבור שלושת האחרים הוצבו התוצאות הרלוונטיות בדירוג נמוך מדי. המנוע אינו תומך בעברית.

הכתובת של Infoseek, גם הוא משנת 1994, מובילה כיום ל-go.com, שמונע על ידי Yahoo! Search. החיפוש בו היה מפתיע לטובה מבחינת הממשק המסודר והמגוון: תצוגה מקדימה לסרטונים ולאתרים רשמיים מוכרים, וכן תוצאות ראשוניות של חיפוש תמונה וחיפוש באתרי חדשות. ככלל, כאשר התוצאות טובות הן טובות מאד – אך עבור שלושה מונחים ברשימה, הן לא היו מספקות בהשוואה לגוגל. יש תמיכה בעברית.

אתר Lycos (1994) הוותיק עם לוגו הכלב הנאמן שמר על עצמאותו, ומצרף תמונה קטנה ושימושית של כל דף שהוא מוצא. הממשק נקי ומינימליסטי עוד יותר מזה של גוגל, ודיוק התוצאות דומה במידה מחשידה לזה של Infoseek. יש תמיכה בעברית.

Altavista, שנולד ב-1995, היה אולי מנוע החיפוש החזק והפופולרי ביותר עד גוגל. כיום, גם הוא מציג בראש הדף תוצאות ממומנות שקל להתבלבל בינן לבין האחרות. בדף הראשי מוצע חיפוש נפרד לתמונות ולחדשות, וכן אפשרות למיקוד החיפוש לפי מדינה. התוצאות זהות באיכותן לאלה של גוגל, ויש תמיכה בעברית.

Excite והלאה

מנוע החיפוש Excite (1995) שודרג לכדי פורטל וגם הוא משלב תוצאות ממספר מנועים גדולים, אך לא נוספה לו תמיכה בעברית. גם בו מוצגות תוצאות ממומנות, ומעבר להן הוא מתפקד ברמה טובה עד גוגלית.

אתר Dogpile, מילה שמשמעותה קצת פחות גועלית ממה שזה נשמע, נוסד בשלהי 1996 כמנוע מטה-חיפוש מקיף ורציני – שאינו תומך בעברית. למעשה, רוב האתרים שסקרנו עד כה הכילו אותו בתור אחת מהתוצאות לשאילתה "Best search engine". בפועל, התוצאות שהוא מחזיר טובות באופן כללי, אך לא מצדיקות את התואר הנכסף.

המנוע Hotbot, שנוסד על ידי Wired Magazine באמצע 1996, התיימר לעדכן את מסד הנתונים שלו בתדירות גבוהה יותר מהמתחרים ולדברי ויקיפדיה היה מהראשונים שהציעו חיפוש בתוך תוצאות החיפוש. הוא תומך בעברית, ולמעשה מהווה כיום רק מעטפת חיצונית למנועי חיפוש אחרים (של Yahoo!, של MSN ושל Lycos, לבחירת המשתמש). משום כך, לא מצאנו טעם בנבירה בתוצאות שהחזיר.

המנוע האחרון שבדקנו, AskJeeves (1996), עורר בזמנו תקווה גדולה שמזכירה לא במעט את ההייפ שהתחולל סביב וולפרם אלפא לפני חודשים ספורים בלבד: מנוע חיפוש שיבין שאילתות בשפה טבעית! לא עוד מילות מפתח מנותקות, מרכאות, פלוסים ומינוסים. המשתמש המודרני רגיל כל כך לחיפוש לפי מילות מפתח, שהטרחה שבכתיבת שאלה תחבירית מסודרת עשויה להיראות לו מיותרת, אך באותם ימים כל מי ששמע על ג'יבס מיהר לאתגר אותו. הביצועים, כמובן, לא עמדו בציפיות – אך כמנוע חיפוש רגיל, הוא תפקד לא רע. כיום, רב המשרתים המצויר שודרג לדמות תלת-ממדית וריאליסטית יותר, והוא גם למד עברית. הוא מעיד על עצמו כ-"Best search engine", ולמרות מעידות ספורות (התוצאה הראשונה עבור "Bing", למשל, היא דף הוויקיפדיה על בינג קרוסבי) הוא היחיד מבין המנועים שבדקנו שמראה אופי משלו, ומשום כך מסוגל גם להפתיע מדי פעם בתוצאה שימושית שהאחרים פספסו.

מסקנות

גוגל השתלטה על עולם החיפוש ברשת בצורה כה גורפת, עד שאנשים מרימים גבה ספקנית בכל פעם שהם שומעים על מנוע חיפוש חדש. אפשר היה לחשוב שלנוכח הדומיננטיות הזו, כל מנועי החיפוש הקודמים ייזנחו או ייעלמו לחלוטין מהנוף. בפועל קרה דבר אחר: בשקט, הרחק מאור הזרקורים, המנועים ההם המשיכו להתקיים, להתפתח או לפחות להתאים את עצמם למצב – ואפילו כיום, כאחת-עשרה שנים לאחר כניסתה של גוגל לשוק, כולם שימושיים כמעט כמו המנוע המוביל!

ייתכן מאד שלחיפוש של גוגל יש יתרון בתחומים נידחים מאלה שבדקנו, וכמובן שאי אפשר להתעלם מהכלים הרבים והשימושיים שנבנו עליו וסביבו. עם זאת, אם משתמש מצוי היה נוסע בזמן מהימים הרחוקים ההם ועד לימינו ומקליד את כתובת מנוע החיפוש החביב עליו, הוא עדיין מסוגל היה למצוא כמעט הכל, ובמקרים ספורים אף ביעילות גדולה קצת יותר מזו שהתרגלנו אליה.