אתר שנבנה ב-2019 „לגוגל” יכול להיות בלתי נראה ל-ChatGPT ב-2026 — בלי שאף אחד ישים לב. אלה חמש הבדיקות שאנחנו מריצים על כל אתר בדוח (חינם, גם בחשבון חינמי), ואיך לבדוק לבד.
1. robots.txt — האם אתם חוסמים את הזחלנים של ה-AI?
פתחו https://האתר-שלכם/robots.txt. חפשו את השמות האלה:
GPTBot (OpenAI — אימון ואינדקס) OAI-SearchBot (ChatGPT Search — ההמלצות) ChatGPT-User (כשמשתמש מבקש מ-ChatGPT לפתוח דף) Google-Extended (Gemini / AI Mode) PerplexityBot ClaudeBot Bingbot (Copilot, ו-ChatGPT נשען על Bing) Applebot-Extended
שורה כמו User-agent: GPTBot ואחריה Disallow: / פירושה שביקשתם מ-OpenAI לא לקרוא אתכם. הרבה תבניות וורדפרס ותוספי „אבטחה” הוסיפו את זה כברירת מחדל ב-2023–2024. מחקו את החסימה או שנו ל-Allow: /.
2. הדף כפי שזחלן רואה אותו
הרבה אתרים מגישים לדפדפן דף יפה ולזחלן — קובץ HTML כמעט ריק, כי כל התוכן נטען ב-JavaScript. בדיקה מהירה: לחצו קליק ימני › „הצג מקור דף” (View Source) בדף הבית. אם אתם לא מוצאים שם את שם העסק, הכתובת והטלפון כטקסט, זחלן שלא מריץ JavaScript לא ימצא אותם. הסף שאנחנו משתמשים בו: פחות מ-400 תווים של טקסט = „ריק”.
3. פרטי העסק בדף עצמו
שם, טלפון, עיר, שעות פתיחה — כטקסט, לא רק בתמונה או בכפתור וואטסאפ. lang="he" בתג ה-HTML. ו-Schema של LocalBusiness (JSON-LD) עם אותם פרטים — זו הדרך שבה מנוע מבין „זה עסק, זו הכתובת, אלה השעות” בלי לנחש. הדוח בתוכנית העסק מייצר את ה-Schema מוכן להדבקה מהנתונים הרשומים.
4. llms.txt
קובץ טקסט קטן ב-/llms.txt שמסביר למודלים מי אתם ומה חשוב בדף. עדיין לא תקן, וגוגל לא משתמשת בו — אבל הוא זול, לא מזיק, וחלק מהמנועים קוראים אותו.
5. הניואנס: „דף אתגר” הוא לא חסימה
אם האתר יושב מאחורי Cloudflare או שירות דומה, זחלן לא-מזוהה עלול לקבל דף „בודקים שאתה לא רובוט”. הזחלנים הרשמיים של OpenAI וגוגל מאומתים ועוברים — ולכן בדוח אנחנו מסמנים דף אתגר כ„לא חד-משמעי”, ורק 403 או 401 נקי או חסימה ב-robots.txt נקראים „חסום”. בדיקה מ-IP ביתי היא לא הוכחה לאף כיוון.
האתר שלכם קריא ל-AI?
הבדיקה כלולה בדוח, גם בחינם. תראו בדיוק איזו שורה ב-robots.txt או איזה דף ריק עוצר את המנוע.
בדקו את העסק — חינםשאלות שבעלי עסקים שואלים
בונה האתרים שלי (Wix / וורדפרס) — האם הוא חוסם AI כברירת מחדל?
Wix לא חוסם. בוורדפרס זה תלוי בתוספים: כמה תוספי אבטחה ו-SEO הוסיפו חסימת GPTBot ב-2023. בדקו את robots.txt בפועל, לא את ההגדרות.
אם אפתח את האתר ל-GPTBot, OpenAI תשתמש בתוכן שלי לאימון?
GPTBot משמש גם לאימון. אם זה מפריע, אפשר לחסום GPTBot ולהשאיר את OAI-SearchBot ו-ChatGPT-User פתוחים — אלה שמשרתים את ההמלצות. הדוח מבחין ביניהם.
האם עדיף לוותר על האתר ולהשקיע רק בפרופיל גוגל?
לא. אתר קריא הוא המקום היחיד שבו אתם שולטים בטקסט שהמנוע קורא עליכם — התיאור, השעות, המומחיות. פרופיל גוגל הכרחי, האתר משלים.