robots.txt

[arye9]

robots.txt

בכלי מנהל האתרים, ב- סך כל שגיאות האחזור של robots.txt
אני מקבל את ההודעה הזאת
Googlebot לא הצליח לגשת לקובץ robots.txt והשהה את סריקת האתר שלך כדי לא להסתכן בסריקת דפים אסורים. מידע נוסף.

האמת שגם אני לא מצאתי את robots.txt,כנראה שמעולם לא בניתי אותו.

איך לתקן את השגיאה שלי, כלומר מה לעשות עכשיו?

תודה, אריה

 

[עמית מלכי]

תיצור את הקובץ בNOTEPAD++

ותשים אותו בתיקייה הראשית של האתר
אם אתה לא רוצה לחסום שום עמוד אז תוכן הקובץ יהיה כזה:
User-agent: *
Allow: /

בהצלחה!

 

[arye9]

שאלת הבהרה

האם לכתוב בשתי שורות כמו שנראה עכשיו?

User-agent: *
Allow: /


אני שואל כי לפעמים האותיות האנגליות משתבשות

תודה רבה, אריה

 

[עמית מלכי]

מדויק

 

[arye9]

O.K. העלתי את הקובץ

האם צריך להודיע איך שהוא לגוגל?

תודה רבה, אריה

 

[aviklein10]

לא

הוא ינסה לסרוק אותו לבד.
תוודא שהוא נמצא במקום הנכון.
זה צריך להיראות כך: http://site.com/robots.txt
כל עוד הוא נמצא שם, זה יימצא.

 

[arye9]

תודה רבה

 

[עמית מלכי]

לא. אין צורך. רק תראה אם אתה מצליח לגלוש אליו

כתוב www.yourdomain.com/robots.txt ותראה אם אתה רואה בדפדפן את שתי השורות שהכנסת לקובץ

בהצלחה!

 

[arye9]

תודה