לפני מספר שבועות דיווחתי על בעיית התוצאות המורחבות של גוגל, שגרמה לאתרים שלמים לעבור אל האינדקס המשני של גוגל בעקבות עדכון big daddy, כך שדפי האתר הופיעו עם סימון "תוצאה מורחבת" בעברית או supplemental Result באנגלית. האינדקס המשני נועד להכיל דפים אותם יציג גוגל רק אם אין דפים מן האינדקס הראשי העונים לשאילתה של המחפש.
בהודעה אותה פרסם מאט קאטס (אחד מן המהנדסים של גוגל) לפני מספר ימים בבלוג שלו, עולות מספר נקודות לגבי הבעיה.
על-פי מאט, האתרים שסבלו מן הבעיה (אותה הוא מכנה “no pages in Bigdaddy") היו אתרים בהם האלגוריתם של גוגל העניק ציון "אמינות" (trust) נמוך לקישורים הנכנסים אליהם או לקישורים היוצאים מהם. דוגמאות לסיבות לאמון נמוך הן קישורים הדדיים מוגזמים, קישורים אל אתרים המוגדרים כאתרי ספאם או אל "שכונות רעות", או קניית / מכירת קישורים. מאחר ומערכת big daddy היא מערכת נפרדת מן האינדקס בו נמצאות התוצאות המורחבות, אז ברגע שמערכת big daddy דחתה דפים מסויימים, אז הם הופיעו במסגרת האינדקס המורחב.
גוגל ביצעו מאמץ לשנות את הספים של האלגוריתם, בכדי לסרוק דפים רבים יותר מן האתרים שהוגדרו כבעייתיים על ידי big daddy, ואכן בסביבות סוף מרץ החלו דפים רבים לעבור מן האינדקס המורחב אל האינדקס הראשי.
בנקודה זו נמצאו על ידי אנשי גוגל מספר בעיות קטנות בפקודת :site (פקודה המאפשרת למחפשים לקבל רשימת דפים מתוך אתר מסויים). הבעיות שהתגלו (ותוקנו) היו:
- הפקודה לא החזירה תוצאות מתוך האינדקס המורחב.
- הפקודה לא עבדה על דומיינים הכוללים מקף (לדוגמא: domain-name.co.il). כרגע עדיין קיימת בעיה עם אתרים עם מקף ודפים מן האינדקס המורחב.
- הפקודה לא החזירה תוצאות נכונות אם מוסיפים לוכסן (slash) בסוף הדומיין (/domain-name.co.il). בעיה זו לא הופיעה בפוסט של מאט אלא בפוסט בבלוג של גוגל.
וכאן מגיע החלק החשוב ביותר בהודעה של מאט. מאט בודק אתרים מסויימים שהתלונו על העלמות של דפים שלהם מן האינדקס. מאט מצביע אל תחתית הדף בשני האתרים, בהם מופיעים קישורים אל אתר רינגטונים חינם, אתר תחרות קידום אתרים, ואתר שמן דגים אומגה 3, אתר משכנתאות, אתר כרטיסי אשראי, ואתר ציוד ספורט. מאט אומר בצורה ברורה מאד – אם ברצונך להכניס דפים רבים יותר לאינדקס, עליך לשמור על איכות הקישורים היוצאים מן האתר שלך. המערכת החדשה יודעת לטפל טוב יותר בקישורים הדדיים וקישורים קנויים. המערכת החדשה של גוגל בנוייה כך שהיא סורקת פחות דפים מאתרים בהם הקישורים היוצאים אינם איכותיים. החלק הזה הוא לטעמי המשמעותי ביותר בהודעה של מאט.
אתר אחר אליו מתייחס מאט, איבד גם הוא דפים רבים, ומאט מצביע על כך שאל האתר יש רק 6 קישורים נכנסים, וזה מה שגרם לירידת כמות הדפים באינדקס בעקבות big daddy. המסקנה – אין ברירה, בכדי להגדיל את כמות הדפים הנסרקים, יש להגדיל את כמות הקישורים הנכנסים.
הנושא האחרון אליו מתייחס מאט הוא אתר ובו קישורים רבים שהם חלק מתוכניות שותפים (affiliate), עליו אומר מאט דבר מאד פשוט – האם לגולשים יש סיבה להגיע דווקא אל אותו האתר, או שעדיף להם להגיע ישירות אל האתר המוכר את הסחורה בפועל. או במילים אחרות – האם לאתר יש ערך מוסף. במקרה הנבדק, התשובה הייתה לא.
לטעמי – אחד הפוסטים החשובים של מאט.
