כמה אתרים ישראליים חוסמים סורקי AI?

מעט מאוד, לפחות לפי robots.txt. 2 מתוך 750 אתרי co.il חוסמים סורק חיפוש של מנוע AI, ו-6 מתוך 750 חוסמים סורק אימון. חסימה בחומת אש לא נראית מבחוץ ולא נספרה.

כמה אתרים נראים ריקים לסורק שלא מריץ JavaScript?

ב-49 מתוך 752 אתרים (6.5%) דף הבית מכיל פחות מ-50 מילים בלי JavaScript. באתרים שהמערכת שלהם לא זוהתה השיעור הוא 18.7%, ובוורדפרס 2.3%.

כמה אתרים מציגים את פרטי העסק בנתונים מובנים?

ל-68.2% יש נתונים מובנים בדף הבית, אבל רק ב-11.4% (86 מתוך 752) הם כוללים ישות של עסק עם שם, ועם טלפון או כתובת.

למה כמעט כל אתרי וויקס במדגם כוללים llms.txt?

63 מתוך 64 אתרי וויקס במדגם כוללים את הקובץ, לעומת 22.4% מכלל האתרים. לפי עמוד העזרה של וויקס, וויקס יוצרת ומתחזקת את הקובץ באופן אוטומטי (נקרא ב-16.10.2026). הממצא מתאר מה קיים באתרים. לא בדקנו אם מנוע כלשהו קורא את הקובץ.

האם הממצאים אומרים אם אתר יופיע בתשובות של ChatGPT או Gemini?

לא. אלה תנאי סף לקריאה של האתר, לא מדד לחשיפה. בדקנו מה סורק רואה כשהוא קורא את האתר מבחוץ, ולא בדקנו אם האתרים מופיעים בתשובות.

לכל המאמריםמרכז מידע

מה מצאנו ב-752 אתרים ישראליים: דוח נתונים, אוקטובר 2026

Name: מה מצאנו ב-752 אתרים ישראליים: דוח נתונים, אוקטובר 2026
Creator: LEADZ
Published: 2026-10-16

16 באוקטובר 2026 · צוות LEADZ · 7 דקות קריאה

אלה תנאי סף לקריאה של האתר, לא מדד לחשיפה.

בקיצור: ב-16 באוקטובר 2026 קראנו את דף הבית של 752 אתרים בסיומת co.il, שהוגרלו מתוך ארכיון ציבורי של הרשת. ב-6.5% מהם דף הבית כמעט ריק כשלא מריצים JavaScript. ל-68.2% יש נתונים מובנים (JSON-LD) בדף הבית, אבל רק ב-11.4% הנתונים כוללים את פרטי העסק. רק 2 מתוך 750 אתרים חוסמים ב-robots.txt סורק חיפוש של מנוע AI. ל-22.4% יש קובץ llms.txt, וכמעט לכל אתרי וויקס במדגם (63 מתוך 64).

הדוח מתאר מה רואה סורק שקורא את האתר מבחוץ. הוא לא בודק אם האתרים מופיעים בתשובות של מנועי AI, ואין בו ציון.

הממצאים

ממצא	אחוז	מתוך כמה	טווח טעות (95%)
דף הבית כמעט ריק בלי JavaScript (פחות מ-50 מילים)	6.5%	49 מתוך 752	5%–8.5%
יש נתונים מובנים (JSON-LD) בדף הבית	68.2%	513 מתוך 752	64.8%–71.4%
יש פרטי עסק בנתונים המובנים (שם, וטלפון או כתובת)	11.4%	86 מתוך 752	9.4%–13.9%
robots.txt חוסם לפחות סורק חיפוש AI אחד	0.3%	2 מתוך 750	0.1%–1%
robots.txt חוסם לפחות סורק אימון אחד	0.8%	6 מתוך 750	0.4%–1.7%
אין robots.txt (404 או 410)	10.4%	78 מתוך 750	8.4%–12.8%
בכתובת robots.txt עונה דף אינטרנט במקום קובץ	8.4%	63 מתוך 750	6.6%–10.6%
אין מפת אתר (404 או 410)	9.4%	70 מתוך 741	7.5%–11.8%
בכתובת מפת האתר עונה משהו שאינו מפת אתר	4.7%	35 מתוך 741	3.4%–6.5%
יש קובץ llms.txt	22.4%	166 מתוך 742	19.5%–25.5%
דף הבית נטען ב-HTTPS	95.5%	718 מתוך 752	93.7%–96.7%
יש כותרת H1 בדף הבית	65%	489 מתוך 752	61.5%–68.4%
יש תיאור (meta description) בדף הבית	69.1%	520 מתוך 752	65.8%–72.3%
שפת הדף מוצהרת (lang)	93.6%	704 מתוך 752	91.6%–95.2%

למה "מתוך כמה" משתנה: 752 אתרים נספרו. כשקובץ לא נקרא באופן חד-משמעי (למשל השרת לא ענה בזמן), האתר לא נספר באותה שורה בלבד: 2 אתרים בשורות של robots.txt, 11 בשורות של מפת האתר ו-10 בשורת llms.txt.

חסימת סורקי AI, לפי סורק

הסורק	סוג	חוסמים ב-robots.txt	טווח טעות (95%)
OAI-SearchBot	חיפוש	2 מתוך 750 (0.3%)	0.1%–1%
Claude-SearchBot	חיפוש	2 מתוך 750 (0.3%)	0.1%–1%
PerplexityBot	חיפוש	2 מתוך 750 (0.3%)	0.1%–1%
GPTBot	אימון	5 מתוך 750 (0.7%)	0.3%–1.6%
ClaudeBot	אימון	6 מתוך 750 (0.8%)	0.4%–1.7%
Google-Extended	אימון	5 מתוך 750 (0.7%)	0.3%–1.6%

סורק חיפוש קורא דפים כדי לענות על שאלה עכשיו. סורק אימון אוסף טקסט לאימון מודלים. חסימה של סורק אימון אינה חסימה של סורק החיפוש של אותה חברה. הטבלה מראה רק מה שהאתר מצהיר ב-robots.txt; חסימה בחומת אש לא נראית מבחוץ ולא נספרה.

המקורות לסוגי הסורקים

לפי מערכת האתר

המערכת זוהתה לפי סימנים בקוד של דף הבית. וורדפרס כולל אתרים שנבנו באלמנטור. קבוצות של פחות מ-30 אתרים אוחדו ל"אחר". בכל תא: האחוז, ובסוגריים טווח הטעות.

ממצא	וורדפרס (481)	וויקס (64)	אחר (36)	לא זוהה (171)
דף הבית כמעט ריק בלי JavaScript	2.3% (1.3%–4%)	1.6% (0.3%–8.3%)	13.9% (6.1%–28.7%)	18.7% (13.6%–25.2%)
יש JSON-LD בדף הבית	80.2% (76.5%–83.6%)	98.4% (91.7%–99.7%)	52.8% (37%–68%)	26.3% (20.3%–33.4%)
יש פרטי עסק בנתונים המובנים	6.7% (4.8%–9.2%)	51.6% (39.6%–63.4%)	22.2% (11.7%–38.1%)	7.6% (4.5%–12.6%)
אין robots.txt (404 או 410)	9% (6.7%–11.9%)	0% (0%–5.7%)	5.6% (1.5%–18.1%)	19.3% (14.1%–25.9%)
אין מפת אתר (404 או 410)	4.6% (3.1%–6.9%)	1.6% (0.3%–8.3%)	11.1% (4.4%–25.3%)	26.5% (20.3%–33.8%)
יש קובץ llms.txt	14.4% (11.6%–17.9%)	98.4% (91.7%–99.7%)	42.9% (28%–59.1%)	11.5% (7.5%–17.3%)

בקבוצות הקטנות הטווח רחב: באתרי וויקס, למשל, פרטי עסק בנתונים המובנים נמצאו ב-51.6%, והטווח הוא בין 39.6% ל-63.4%. הקבוצות שונות זו מזו בגודל ובסוג האתרים, ולכן הטבלה מתארת מה נמצא ולא משווה בין מערכות.

מה הנתונים לא אומרים

אלה תנאי סף לקריאה של האתר, לא מדד לחשיפה. הדוח לא בודק אם אתר מופיע בתשובות של ChatGPT, Gemini, Perplexity או מנוע אחר, ולא נותן ציון. אתר שעומד בכל השורות בטבלה לא מובטח שיופיע בתשובה, ואתר שלא עומד בהן עשוי להופיע.

איך בדקנו

מאיפה האתרים: הארכיון הציבורי Common Crawl, סריקה CC-MAIN-2026-39 (ספטמבר 2026). לקחנו כל דומיין רשום בסיומת co.il שהארכיון שמר ממנו לפחות עמוד אחד שנטען בהצלחה: 67,293 אתרים.
ההגרלה: 800 אתרים בהגרלה אקראית עם זרע קבוע (20261016), כך שהרצה חוזרת מחזירה אותה רשימה.
הקריאה: ב-16 באוקטובר 2026, בבוקר. לכל אתר קראנו פעם אחת את דף הבית, robots.txt, llms.txt ומפת האתר, בלי להריץ JavaScript. הסורק הזדהה בשמו (LeadzAIScan), בלי בקשות בשם של סורק AI, ולא יותר משש בקשות לאתר.
מה נפסל: 48 מתוך 800. 19 לא ענו, 17 החזירו שגיאה, 10 הפנו לדומיין אחר, ו-2 היו דפי חניה או דומיין למכירה. 752 אתרים נספרו.
הגדרות: "כמעט ריק" = פחות מ-50 מילים ב-HTML של דף הבית. "יש JSON-LD" = לפחות בלוק אחד תקין. "פרטי עסק" = ישות של עסק עם שם, ועם טלפון או כתובת. "חוסם" = מה שכתוב ב-robots.txt לגבי דף הבית. "אין" = השרת ענה 404 או 410.
טווח הטעות: רווח סמך של 95% בשיטת וילסון, באחוזים.
בדיקה שנייה: 20 אתרים מהמדגם נקראו שוב באותו יום בדרך קריאה אחרת. 179 מתוך 180 השוואות היו זהות. ההבדל היחיד היה בהגדרה של מפת אתר, לא בטעות קריאה.
פרטיות: רשימת האתרים והתוצאה של כל אתר לא מתפרסמות. מתפרסמים רק סיכומים.

המקור לרשימת האתרים

Common Crawl, ארכיון הסריקה של ספטמבר 2026 (CC-MAIN-2026-39) — המסגרת שממנה הוגרלו האתרים

מגבלות

רק co.il. עסקים ישראליים בסיומת com, il או אחרת לא נכללו. הסיומת co.il מיועדת לגופים מסחריים, אבל לא בדקנו שכל אתר במדגם שייך לעסק פעיל.
רק מה שהארכיון מכיר. אתר שאף אחד לא מקשר אליו כנראה לא נמצא בארכיון, ולכן לא היה יכול להיות מוגרל.
רק דף הבית. עמודים פנימיים לא נבדקו.
בלי JavaScript. חלק מהסורקים כן מריצים JavaScript. השורה "כמעט ריק" מתארת רק סורק שלא מריץ אותו.
רק מה שמוצהר. חסימה בחומת אש או בשירות הגנה לא נראית מבחוץ.
הנתונים המובנים לא נבדקו לנכונות. ספרנו אם הם קיימים, לא אם הפרטים בהם נכונים.
זיהוי המערכת חלקי. ב-171 אתרים לא זוהתה מערכת, והם מוצגים כקבוצה בפני עצמה.
קריאה אחת, בבוקר אחד. אתר שהיה למטה באותה שעה נפסל או לא נספר באותה שורה.

המקור לחלק הזה

Vercel, 17.12.2024 — רוב סורקי ה-AI לא מריצים JavaScript; Gemini ו-AppleBot כן

לציטוט

LEADZ, "מה מצאנו ב-752 אתרים ישראליים", מהדורת אוקטובר 2026. 752 אתרי co.il, נקראו ב-16.10.2026, מתוך הגרלה מ-Common Crawl CC-MAIN-2026-39.

קובץ הסיכומים להורדה (CSV)