כמעט כל מנהל אתרים מנסה לייעל את דפי האתר שלו באופן שישיג כמה שיותר אלמנטים באינדקס. אך במקרים מסוימים, להפך, עליכם להסתיר כמה עמודים, למשל טופס להזנת נתוני רישום, שחזור סיסמאות וכו '.
זה הכרחי
עריכת קובץ Robots.txt
הוראות
שלב 1
הדרך הקלה ביותר לסגור את האינדקס של כמה קטעים או אתר ספציפי שלם היא להזין את הערכים המתאימים בקובץ robots.txt. הוא משמש כמדריך למנועי חיפוש. כשנכנסים לדפי האתר, רובוט החיפוש מתייחס לקובץ זה, אם הוא לא שם, הוא מוסיף את האתר לאינדקס, אחרת הוא ממלא אחר ההמלצות שצוינו בקובץ זה.
שלב 2
אם יצרת את האתר שלך בעצמך, ואין לך יישום כזה, בצורה של מסמך טקסט המציין את האיסורים, קל ליצור אותו בעצמך. פתח מסמך טקסט חדש, למשל, באמצעות תוכנית Notepad. הצב את השורות הבאות בגוף המסמך: User-agent: * Disallow: /file.html Disallow: / directory /
שלב 3
עכשיו בואו להבין מה שאלתם את מנוע החיפוש כמשימה. משמעות הסימן "*" מול User-agent הוא כי הוראה זו חייבת להתבצע על ידי כל מערכות הקבצים. לדוגמה, אם אתה כותב "Yandex" במקום "*", הערעור הזה ייקרא רק על ידי הרובוט של מנוע החיפוש Yandex. ביטול הצהרות אוסר על הוספה לאינדקס של קטע ספציפי (ספרייה) או קובץ (קובץ.html).
שלב 4
לאחר הידור הקובץ robots.txt תוכלו לעבור ישירות לטקסטים בדפי האתר. כידוע, מנועי חיפוש לא אוהבים שיש יותר משלושה קישורים פעילים חיצוניים בדפים שלך. מה אם אתה זקוק לדימום באף אך פרסם 5 קישורים או יותר. במקרים אלה, אתה יכול להשתמש במאפיין או בתג.
שלב 5
כדי לסגור קישורים מאינדקס על ידי מנוע החיפוש של גוגל, עליך להביא את הקישור לצורה הבאה: קישורי עוגן. יש להכניס את גוף התכונה לכל חלק של הקישור, ולא לשכוח להפריד בינו לבין רווח, כלומר. ניתן למקם את התכונה בין "a" ל- "href" או בין הקישור לעוגן שלו.
שלב 6
כדי לסגור קישורים מאינדקס על ידי מנוע החיפוש Yandex, עליך להביא את הקישור לטופס הבא: קישור עוגן. התג ממוקם בהתחלה ובסוף הקישור. אל תשכח שהתג הזה משויך: החלק השני, שלא כמו הראשון, מגיע עם סימן "/".
