4 דקות קריאה

כתובות ה-IP של Googlebot: רשימה מלאה (מתעדכנת מדי יום מה-API הרשמי)

רשימה מעודכנת של כל טווחי ה-CIDR וה-IP שבהם משתמשים סורקי Googlebot, נשלפת מדי יום מה-JSON API הרשמי של גוגל. כולל את חמשת קבצי ה-IP ואת שלוש קטגוריות הסורקים: Googlebot רגיל, סורקים מיוחדים ופעולות משתמש.

בדוק כתובת IP
רשת (CIDR)גרסהסוגReverse DNS
2001:4860:4801:10::/64IPv6Googlebot רגילcrawl-***.googlebot.com
2001:4860:4801:11::/64IPv6Googlebot רגילcrawl-***.googlebot.com
2001:4860:4801:12::/64IPv6Googlebot רגילcrawl-***.googlebot.com
2001:4860:4801:13::/64IPv6Googlebot רגילcrawl-***.googlebot.com
2001:4860:4801:14::/64IPv6Googlebot רגילcrawl-***.googlebot.com
2001:4860:4801:15::/64IPv6Googlebot רגילcrawl-***.googlebot.com
2001:4860:4801:16::/64IPv6Googlebot רגילcrawl-***.googlebot.com
2001:4860:4801:17::/64IPv6Googlebot רגילcrawl-***.googlebot.com
2001:4860:4801:18::/64IPv6Googlebot רגילcrawl-***.googlebot.com
2001:4860:4801:19::/64IPv6Googlebot רגילcrawl-***.googlebot.com
סה״כ 2111 רשתות IP
עמוד 1 מתוך 212

למה בכלל צריך את הרשימה הזו?

כדי לזהות בקשות Googlebot אמיתיות, להרחיק בוטים מתחזים ולפתור בעיות אינדוקס. כל אלה חלק מהעבודה בביקורת SEO טכנית של אתר.
זה מסייע במיוחד כאשר:

  • מסננים תעבורה לפי IP או חומת אש
  • מנתחים תעבורה בלוגים
  • מאבחנים תקלות סריקה ב-Search Console
  • מוודאים שאין בוטים זדוניים שמתחזים ל-Googlebot

הנתונים מתעדכנים אוטומטית מדי יום מה-API הרשמי של Google Search Central.


שלוש קטגוריות, חמישה קבצים

זו הנקודה שהכי מבלבלת, אז כדאי לסדר אותה מראש.

בתיעוד שלה גוגל מגדירה שלוש קטגוריות של סורקים: common crawlers, special-case crawlers ו-user-triggered fetchers. אבל היא מפרסמת חמישה קבצי JSON של טווחי IP. המספרים לא תואמים כי הקטגוריה השלישית מתפרסת על שלושה קבצים נפרדים.

כדי לאמת בקשה, צריך לבדוק אותה מול הקובץ הנכון, לא מול הקטגוריה.

1. Googlebot רגיל (Common Crawlers)

הסורקים הקלאסיים של Google Search.

Reverse DNS:
crawl-***.googlebot.com
geo-crawl-***.geo.googlebot.com

רשתות: 315 (169 IPv4, 146 IPv6)


2. סורקים מיוחדים (Special Crawlers)

סורקים של מוצרים ייעודיים (AdsBot,‏ Video, ועוד).

Reverse DNS: rate-limited-proxy-***.google.com
רשתות: 270 (135 IPv4, 135 IPv6)


3. פעולות משתמש (User-Triggered Fetchers)

היכן שהמשתמש מפעיל את ה-fetch בעצמו:
Feedfetcher,‏ Site Verifier,‏ Read Aloud, שירותים חיצוניים, וגם סוכני ה-AI של גוגל.

זו הקטגוריה שמתפרסת על שלושה קבצים, וכדאי להכיר את ההבדל ביניהם:

  • user-triggered-fetchers.json – פעולות שלא רצות על תשתית גוגל. ה-reverse DNS שלהן מסתיים ב-gae.googleusercontent.com
  • user-triggered-fetchers-google.json – פעולות שגוגל עצמה מפעילה. ה-reverse DNS שלהן מסתיים ב-google.com
  • user-triggered-agents.json – הקובץ הייעודי לסוכני ה-AI

רשתות בשני קבצי ה-fetchers: 1,506 (753 IPv4, 753 IPv6)
רשתות בקובץ הסוכנים: 20 (12 IPv4, 8 IPv6)

הטבלה למעלה מציגה את קובץ הסוכנים בנפרד, כי טווחי ה-IP שלו נפרדים. חשוב לא להתבלבל: זו הפרדה של רשימות IP, לא קטגוריה רביעית של סורקים. בתיעוד של גוגל הסוכנים יושבים בתוך הקטגוריה הזו.


נתונים סטטיסטיים על טווחי ה-IP

התפלגות הרשתות לפי סוג

סוג סורק IPv4 IPv6 סה"כ
סורקים רגילים 169 146 315
סורקים מיוחדים 135 135 270
פעולות משתמש 753 753 1,506
סוכני AI 12 8 20
סה״כ 1,069 1,042 2,111

על טווחי CIDR

גוגל עברה לפרסם בלוקים קטנים ואחידים במקום טווחים רחבים:

  • רוב הבלוקים ב-IPv4 הם /27 (עד 32 כתובות כל אחד)
  • רוב הבלוקים ב-IPv6 הם /64
  • הבלוק הקטן ביותר: /28, הגדול ביותר: /16

השוואה לסורקים אחרים

  • Googlebot – רשימת IP מלאה, מתעדכנת יום-יום
  • Bingbot – רשימה רשמית ב-bing.com/toolbox/bingbot.json
  • Facebook Crawler – חלקית
  • Semrush Bot – רשימה פומבית זמינה

איך לאמת Googlebot בפועל

1. בדיקת Reverse DNS

host 66.249.66.1

פלט חוקי ייראה כך:

1.66.249.66.in-addr.arpa domain name pointer crawl-66-249-66-1.googlebot.com

2. בדיקה מול טווחי ה-CIDR (מהטבלה למעלה)

למשל, לאשר גישה ל-Googlebot בלבד ב-iptables:

iptables -A INPUT -s 66.249.64.0/27 -j ACCEPT

3. שימוש ב-Nginx

geo $is_googlebot {
    default 0;
    66.249.64.0/27 1;
    # ... רשתות נוספות
}

4. שליפת ה-JSON API

curl https://developers.google.com/static/crawling/ipranges/common-crawlers.json

פלט לדוגמה:

{
  "creationTime": "2026-07-24T14:46:00.000000",
  "prefixes": [
    { "ipv4Prefix": "66.249.64.0/27" },
    { "ipv6Prefix": "2001:4860:4801:10::/64" }
  ]
}

גוגל מעדכנת את הקבצים האלה מדי יום.


שאלות נפוצות

למה אני רואה Googlebot ממדינות שונות?
גוגל מפעילה תשתית סריקה מבוזרת עולמית. כתובת ה-IP משתנה לפי עומס, זמינות ומיקום גיאוגרפי שמשקף חוויית משתמש אמיתית.
כתובת ה-IP עוברת את reverse DNS אבל לא מופיעה בטווחים. מה עושים?
זה בדרך כלל עניין של השהיית עדכון. רשימות ה-CIDR מתעדכנות מדי יום. אם reverse DNS תקין, זו כנראה כתובת אמיתית.
האם הרשימה הזו כוללת גם Googlebot שמגיע דרך שירותי ענן?
לא. הרשימות כוללות רק תשתית סריקה שגוגל מפעילה בעצמה. כתובות של לקוחות Google Cloud לא נמצאות בהן, ולכן בוט שרץ על GCP ומתחזה ל-Googlebot לא יעבור אימות מול הרשימה. זו בדיוק המטרה שלה.
האם גוגל מוחקת או מוסיפה טווחי IP לעיתים קרובות?
כן. לרוב מדובר בשינויים קטנים, אך לעיתים מתווספים טווחים חדשים כחלק מהתרחבות תשתית הסריקה.
האם reverse DNS לבדו מספיק כדי לאמת בקשה?
לא תמיד. פעולות משתמש וסוכני AI חולקים את אותם דפוסי reverse DNS, כלומר gae.googleusercontent.com ו-google-proxy, ולכן אי אפשר להבדיל ביניהם לפי השם בלבד. ההפרדה מגיעה מקובצי ה-JSON הנפרדים של גוגל. לאימות אמין כדאי לשלב reverse DNS עם בדיקה מול טווחי ה-IP של הקטגוריה הרלוונטית.

מקורות

  • Google Search Central – Verifying Googlebot
  • JSON IP Ranges API
  • תיעוד סריקה ואינדוקס של Google Search

עדכון אחרון: 2026-07-26

אהבתם את התוכן? הוסיפו אותי כמקור מועדף בגוגלאהבתם את התוכן? הוסיפו אותי כמקור מועדף בגוגל
שיתוףXLinkedInהעתקת קישור