חסימת האתר בפני סורקי AI (AI Crawlers)
3 דקות
יש לכם אפשרות לחסום סורקי AI כדי שלא יוכלו לגשת לאתר שלכם ולהשתמש בתוכן שלכם. זה שימושי במיוחד לבעלי אתרים שלא רוצים שהתוכן שלהם ישמש לאימון מודלי שפות גדולים (LLM) ללא אישור. לדוגמה, אם יש באתר מאמרים מחקריים ייחודיים, בעלי האתר לא ירצו שה-AI ישתמש בתוכן שלהם ללא הסכמה.
שימוש בקובץ robots.txt כדי לחסום סורקי AI
קובץ ה-robots.txt של האתר שלכם מכיל הוראות לאישור או לאיסור בקשות מסוימות ממנועי חיפוש. הפקודה "allow" מפרטת לסורקים אילו לינקים הם יכולים לבדוק, והפקודה "disallow" מפרטת להם אילו לינקים הם לא יכולים לבדוק.
כדי להגדיר לקובץ ה-robots.txt לחסום סורקי AI:
- היכנסו ל-Search Engine Optimization (SEO) בדאשבורד של האתר.
- בחרו ב-Robots.txt Editor תחת Tools and settings (כלים והגדרות).
- הקליקו על View File (הצגת הקובץ).
- הקליקו על השדה תחת Your robots.txt file (קובץ ה-robots.txt שלכם).
- כדי להוסיף את פרטי קובץ ה-robots.txt הוסיפו את ההנחיות הבאות תחת This is your current file (הקובץ הנוכחי שלכם):
- User-agent: CCBot
Disallow: / - User-agent: GPTBot
Disallow: / - User-agent: ChatGPT-User
Disallow: / - User-agent: BingAI
Disallow: /
- User-agent: CCBot
- הקליקו על Save Changes (שמירת השינויים).
- הקליקו על Save (שמירה).

טיפ
הרשימה הזו כוללת כמה סורקי AI מוכרים, אבל תמיד תוכלו להוסיף עוד לפי הצורך.
שימוש בתגי מטא של רובוטים לחסימת סורק AI
תגי מטא הם קודי HTML המכילים פרטים שמנועי חיפוש ודפדפנים יכולים לקרוא על העמוד. הגדרת תגי המטא של רובוטים של האתר מאפשרת לכם שליטה ספציפית לעמוד על אופן הסריקה והאינדוקס של ה-HTML בתוצאות החיפוש.
כדי להשתמש בתגי מטא כדי לחסום סורקי AI:
Studio Editor
Wix Editor
- עברו אל ה-editor.
- הקליקו על Pages & Menu
(עמודים ותפריטים) בצד השמאלי של ה-editor.
- הקליקו על אייקון הפעולות הנוספות
ליד העמוד הרלוונטי.
- הקליקו על SEO basics (הגדרות SEO בסיסיות).
- הקליקו על הטאב Advanced SEO (SEO מתקדם).
- הקליקו על Robots Meta Tag (תגית Robots).
- בחרו את תיבת הסימון nosnippet כדי למנוע מהתוכן בעמוד לשמש כקלט ישיר לסקירות AI.

- פרסמו את האתר (Publish).
Learn more about robots meta tags from Google.
שאלות נפוצות
הקליקו על שאלה למטה לפרטים נוספים על חסימת סורקי AI מהאתר.
האם אפשר לחסום את כל הסורקים?
האם יש דרך לחסום לגמרי סורקים לא מורשים?
האם חסימת סורקים תשפיע על ה-SEO שלי?
איך אפשר לדעת אילו סורקים לחסום?