מעקב אחרי ההשקה

כדי לספק חוויית משתמש טובה, Google תבדוק שהקישורים לפעולות שסיפקתם פועלים בהתאם למדיניות בנושא פעולות במקומות. לשם כך, Google תשתמש בשילוב של בדיקה אנושית ואוטומטית.

בדיקות ידניות

ל-Google יש צוות שמפוזר ברחבי העולם. מומלץ לא לחסום את הגישה לקישורי פעולה באזורים האלה כדי להבטיח תהליך צירוף מהיר ותמיכה לאחר ההשקה.

בדיקות אוטומטיות (סורקים)

סורקים אוטומטיים ייכנסו מדי פעם לקישורי הפעולה שלכם כדי לוודא שהדפים נטענים כמו שצריך. אם סורק מקבל קוד סטטוס של HTTP מסוג 4xx או 5xx (למשל 403 Forbidden או 404 Not Found), הקישור יסומן כקישור שבור או כקישור לא נגיש, והוא יושבת בחיפוש Google ובמפות Google.

זיהוי של סורקי אינטרנט והגדרת חומת אש

כדי לוודא שסורקי האינטרנט לא נחסמים (מה שיוביל להשבתה של הקישורים לפעולה), צריך לוודא שחומת האש ליישומי אינטרנט (WAF), רשת אספקת התוכן (CDN) או כללי הגבלת כתובות ה-IP מאפשרים לסורקים שלנו לשלוח שאילתות לדפים שלכם בכל שלב.

כדי לזהות סורקים של Google ולבטל את החסימה שלהם:

  • סורקים של Actions Center: מחרוזת ה-User-Agent תכיל את המחרוזת Google-Actions-Center (לדוגמה: Mozilla/5.0 (X11; Linux x86_64) AppleWebKit/537.36 (KHTML, like Gecko; Google-Actions-Center) Chrome/104.0.5112.101 Safari/537.36). מקור השיחות הוא שמות מארחים של שרת proxy לפי התבנית google-proxy-***-***-***-***.google.com.
  • סורקי Googlebot: סורקים לאימות קישורים משתמשים גם במחרוזות סוכן משתמש רגילות של Googlebot.
  • אימות: אפשר לוודא שהבקשות הנכנסות באמת מגיעות מ-Google באמצעות שאילתות DNS הפוכות (*.googlebot.com או *.google.com) כמו שמתואר במאמר אימות של Googlebot וסורקים אחרים של Google.
  • בדיקת יכולת הסריקה: אפשר להשתמש בכלי לבדיקת כתובות URL ב-Google Search Console כדי לבדוק אם Googlebot יכול לסרוק ולבצע רינדור של הדפים בזמן אמת. מדביקים את כתובת ה-URL המלאה בסרגל החיפוש בחלק העליון של Google Search Console, מקישים על Enter ולוחצים על בדיקה של כתובת URL פעילה כדי לראות נתונים בזמן אמת לגבי סריקה, עיבוד והוספה לאינדקס.

אם קישור לפעולה הושבת בגלל שגיאות בסורק, עדכון של הגדרות השרת או חומת האש כך שבקשות מסורקים של Google יחזירו 200 OK יאפשר אימות מחדש אוטומטי כדי להסיר את החסימה ולשחזר את הקישור באופן אוטומטי.

בקשות להסרה ב-Google Search Console

בנוסף לבדיקות אוטומטיות של סורקים, יכול להיות שקישורים יושבתו אם בעלי הדומיין שלחו ב-Google Search Console בקשות פעילות להסרת כתובת URL או דומיין.

אם קישורי ההפניה לפעולה לא מופיעים למרות שהם מחזירים 200 OK לסורקי Google, כדאי לבדוק ב-Google Search Console אם נשלחו בקשות להסרה של הדומיין או כתובות ה-URL שלכם, ולבטל בקשות להסרה שהתוקף שלהן פג או שהן פעילות באמצעות הכלי להסרת דפים מתוצאות החיפוש ב-Search Console.

שמירה במטמון

כדי להפחית את העומס על אתר השותף, הסורקים שלנו מוגדרים בדרך כלל כך שהם יתייחסו לכל הכותרות הרגילות של HTTP שקשורות לשמירת נתונים במטמון שמופיעות בתגובה. המשמעות היא שבאופן הזה, באתרים שהוגדרו בצורה נכונה, אנחנו נמנעים מאחזור חוזר של תוכן שמשתנה לעיתים רחוקות (לדוגמה, ספריות JavaScript). פרטים נוספים על הטמעה של שמירה במטמון זמינים במסמכי התיעוד בנושא שמירה במטמון של HTTP.